Optimizely Feature Experimentation Avaliações e Detalhes do Produto - Página 6

Tive a oportunidade de conhecer uma equipe altamente talentosa que me deu uma grande visão sobre a ferramenta CI/CD desenvolvida pela Optomizely. O processo parecia muito conveniente e fácil de usar. Análise coletada por e hospedada no G2.com.

Alguns testes de regressão adicionais para eliminar os cenários de casos extremos precisam ser incluídos para torná-lo de classe mundial. Análise coletada por e hospedada no G2.com.

Os SDKs que eles oferecem funcionam muito bem, são bem escritos e fáceis de configurar, e eles têm suporte para várias linguagens, considerando o desempenho do aplicativo como algo importante a ter em mente. Análise coletada por e hospedada no G2.com.

Não ter uma solução automática pronta para lançamentos de recursos blue-green. Acho que isso se deve ao fato de estarem muito focados em estar offline, e este não é um problema fácil de resolver. Análise coletada por e hospedada no G2.com.

A melhor parte é a facilidade de configurar experimentos e poder alterar o tamanho da população. O monitoramento de conversão embutido também é uma grande vantagem. Ele nos permite lançar experimentos com segurança e com uma maneira muito rápida de reverter, se necessário. Análise coletada por e hospedada no G2.com.

Às vezes, obter as métricas nos resultados dos experimentos corretamente é difícil e acabamos recorrendo a outras ferramentas para garantir que temos uma imagem precisa dos resultados. Análise coletada por e hospedada no G2.com.

Adoro que seja relativamente fácil para mim configurar testes ab e experimentos multivariados com dimensionamento de amostra e acompanhar métricas de sucesso de conversão. Análise coletada por e hospedada no G2.com.

3 pontos problemáticos:

1) Difícil de usar em dispositivo móvel

2) A interface do usuário não é tão boa quanto na web

3) Configurabilidade limitada via código, o que muitas vezes é uma vantagem para os desenvolvedores Análise coletada por e hospedada no G2.com.

Fácil de alterar variáveis e etiquetar, fácil de iniciar e pausar testes. Pode ver os resultados claramente. Análise coletada por e hospedada no G2.com.

Sinto que poderia ter uma UX modernizada melhor, já que tem a mesma aparência há algum tempo. Análise coletada por e hospedada no G2.com.

A ferramenta Optimizely Full Stack oferece a capacidade de aprender usando dados e controlando a interface do usuário e os dados que impulsionam a experiência do usuário. Podemos aproveitar nossos designers e engenheiros para desenvolver testes que impactam a satisfação dos hóspedes enquanto maximizam a receita. Ao fazer parceria com a equipe da Optimizely, nossos engenheiros conseguiram construir uma versão conteinerizada do Full Stack e permitir que mais de 22 equipes de produto aproveitassem os benefícios desta ferramenta via API. A parceria envolvida foi a melhor que experimentei em meus mais de 20 anos de desenvolvimento de software. Análise coletada por e hospedada no G2.com.

Uma área que tem gerado alguma preocupação para nossas equipes é quão fácil é publicar vencedores em produção 100%. Tivemos casos em que pessoas de negócios que não têm o entendimento completo dos fluxos de usuários existentes que poderiam ser impactados pela promoção de um teste simplesmente promoveram o vencedor sem consultar a equipe de engenharia de produto. A facilidade de promover vencedores é uma boa característica, mas deve haver uma governança por trás disso para garantir que as experiências corretas entrem em produção. Análise coletada por e hospedada no G2.com.

A flexibilidade e a facilidade de uso quando você sabe exatamente o que deseja fazer com a plataforma e seu site. De testes multivariados a redirecionamentos, reorganização de conteúdo em páginas ou fazendo alterações em várias páginas, tudo em uma única experiência. A Optimizely tem sido capaz de fazer tudo isso para minha equipe. Análise coletada por e hospedada no G2.com.

Eu não diria que há muito que eu não goste no Optimizely, tanto quanto havia algumas limitações ao usar a plataforma no que diz respeito à estrutura do site da minha empresa. Com isso em mente, certifique-se de que você será capaz de alcançar tudo o que deseja usando a ferramenta com base na configuração da sua propriedade web. Para referência, eu estava usando Gatsby+Contentful e não consegui fazer alterações específicas em módulos em páginas que compartilhavam a mesma classe no código. Análise coletada por e hospedada no G2.com.

Sou um grande fã da liberdade e flexibilidade que a funcionalidade de experimentos de recursos oferece ao usuário final. Economizei muito tempo e dinheiro utilizando esse recurso e consegui executar múltiplos testes A/B multivariantes em meu produto com apenas um clique. Posso personalizar/diferenciar rapidamente meus recursos em tempo real com base nas tendências de dados e reduzir o risco de grandes lançamentos de recursos através do uso da funcionalidade de sinalização de recursos. Análise coletada por e hospedada no G2.com.

Como é o caso com a maioria das ferramentas, um dos pontos problemáticos com o Optimizely é que ele ainda requer suporte de desenvolvedores e nem sempre funciona perfeitamente desde o início. Não conseguimos utilizar completamente os cálculos de significância estatística que o Optimizely fornece porque há inconsistências entre esta ferramenta e nossa ferramenta de BI, o que pode ser complicado de resolver. Análise coletada por e hospedada no G2.com.

O painel está limpo, parece organizado. Capacidade de criar testes de recursos, testes divididos e executar variáveis para diferentes coortes. Análise coletada por e hospedada no G2.com.

Completamente inutilizável em dispositivos móveis. Se houvesse uma necessidade repentina de mudar uma configuração ou desativar um teste em um ambiente por completo, você não pode fazer isso enquanto está em movimento. Além disso, não há como mudar um teste de recurso para um teste a/b mais simples ou vice-versa se o design do experimento precisasse mudar de curso. Análise coletada por e hospedada no G2.com.

Desenvolvimento é o melhor para a pilha considerando todos os pontos. Análise coletada por e hospedada no G2.com.

Deveria ser melhor em tecnologia e também deveria ser útil para conscientizar as pessoas. Análise coletada por e hospedada no G2.com.