完全清醒睾丸A/B

Esta provavelmente não é a primeira vez que você ouve falar清醒os testes a /B。Vai ver você já leu alguns tantos artigos sobre o tema na internet, ou então já até roda esses testes nos电子邮件e posts da sua loja。

啊,有问题吗?É que mesmo com tanta informação清醒的我的天，我的天muita绅士não后果fazer bom uso desses testes。O resultado, já dá para imaginar: empreendedores tomando decisões importantes com base em dados错误，gerados via testes imprecisos。

乌玛das raízes desse问题está没有fato de que os testes A/B muitas vezes são解释de maneira极端简化，sem dê一个devida atenção aos pormenores do processo de criação。

我知道我有一个决定，我有一个绝对的决定当当o que você精确的军刀para rodar测试A/B没有电子商务。

O que é um teste A/B?

O teste A/B, também conhecido como拆分测试，比较duas versões de uma mesma página da internet para então确定质量质量呈现um melhor desempenho。

我们正在处理comparação ajuda você， empreendedor, a tomar decisões重要的商业，gerar mais receita a partir do tráfego da loja e coletar dados相关的para nova estratégia de marketing。ob欧宝娱乐app下载地址

科莫funciona吗?

Num teste A/B padrão, você mostra A versão A (também chamada de“control”)do site para 50% dos seus visitantes, e A versão B(“variante”)para os outros 50%。Ganha a versão que apresar a melhor taxa de conversão。

Se, por exemplo, a variante (versão B) consguir a taxa mais alta de conversão, ela deverá ser implementada como versão官方没有site e disponibilizada para 100% dos seus visitantes。

Isso significa que variante vai se torna nova versão de control, o que por sua vez demanda a criação de uma nova variante。

连续性的Antes de continuarmos， é importante lembrar que a taxa de conversão do site é uma métrica不正确的para avaliar o sucesso da loja;Sabe por quê?

Porque é possível auumentar a taxa de conversão instantaneamente: basta anunciar todos os seus produtos de graça。Vai ser uma péssima decisão商业，mas certamente Vai colocar a taxa de conversão lá nas alturas。

A melhor estratégia, portanto， é acompanhar o valor de uma conversão até o final da jornada de comppra de um client。

O que é um teste A/B/n?

O test A/B/n nada mais é do que uma forma de tesstar mais de uma variante em relação ao control。没有lugar de mostrar o control para 50% dos seus visantes e a variante para os outros 50%， você pode optar por mostrar a versão control para 25%， a primeira variante para outros 25% e a second variante para uma terceira parcela de 25% dos visantes。

Atencao:um teste A/B/n é diferente de um teste multivariado。Neste último formato, o objectivo é testar variantes e元素不同的准确定性质量combinação呈现melhores结果。

E, para realizar um teste multivariado, você precisa ter um volume de tráfegoextremamente中音．

Fonte da imagem:谷歌

质量检验速度duração测试A/B?

O理想é que O seu test A/B fique ativo por ao menos doisciclos期中；Se isso não for possível na sua loja, tente deixá-lo一切都好。

lembrese também de não interromper o teste só porque a significância estatística foi atingida;Também não淡水河谷interrompê-lo阿廷吉尔阿摩斯特拉pré-determinada。重要的外要素做测试A/B é A realização de atualizações e基本要素periódicos。

这句话的意思是:

1. 我们的客户，精确的速度，可决定的补偿não我们的中心，一个测试;
2. Todas as fontes de tráfego podem ser (Facebook，电子邮件，时事通讯，mecanismos de busca…);
3. 异常情况与事件有关的事件事件incluídos no teste (uma通讯não programada ou um evento special de comppra)。

Se você já usou uma ferramenta ou app para criar e implementar testes A/B, com certeza está familiarizado com aquele ícone verdinho da " significância estatística "。

O问题é que, para muita gente, esse ícone verde é um sinal para " opa, já结果;Posso cancelar o teste "inelizmente, a significância estatística não é um, um，对，encerrar o teste, o fato de que ela foi atingida, portanto，Não deve ser lido como uma permissãoPara coletar OS dados e seguir em frente。

E o tamanho pré-determinado da amostra não精确的元素tão我有我的绅士风度。Você pode até usar acalculadora da Resultados DigitaisPara fazer as contas:

O cálculo acima mostra que, se taxa de conversão atual da loja for de 10% e você estiver calculando uma melhoria de 30%， você precisará atingir uma amostra为什么variacaoDe 1.629 visitas em cada página do site。这是重要的você我们之间的关系是3.300，我们之间的关系是相关的。

Vejamos o que acontece se miniuirmos os parâmetros:

集市，diminuímos分类群conversão天然para 3% e colocamos a expectativa de melhoria em 10%。科莫nível德significância estatística não穆杜，一个阿莫斯特拉为什么variacaoSubiu para 51.486 - o que significa que, para atingir bonons resultados no teste, você vai precisar de pouco mais de 100 million访问量。

Os do exare acima serm parstrar que tamanho da amostra deve ser calculado antes do teste A/B ser implementado。Além disso, lembre-se: mesmo que tenha atingido o nível de significância estatística, o teste não pode ser interrompido até que tamanho da amostra seja atingido。Se mesmo assim você interromper o teste, este deixará de ser válido。

É por isso que você não deve seguir regras que muita gente disfarça como“práticas推荐”，por exemplo:“para o teste após conguir 100 novas conversões”。

实现atualizações e基本要素periódicos nos testes também é um重要要素para garantir a precisão do resulttos, pois o tráfego da loja pode变量de acordo com dia da semana ou mesmo horários个人。

对实现的动机A/B

Vamos supor que você gastou R$ 100, 000 em uma campanha no Facebook广告e conseguiu fazer com que dez visitantes chegassem até o site da loja。Se o valor médio do seu produto é de R$ 25,00, oito daqueles dez visitantes deixaram o site sem realizar nenhuma comppra e os outros dois gastaram R$ 25,00 cada um, você…

Perdeu R$ 50,00。

Agora vamos imaginar um outo cenário: você gastou R$ 100,00 com anúncios do Facebook, e o valor médio do seu produto ainda é de R$ 25,00。Mas, daqueles dez visitantes, cinco gastaram R$ 25,00 cada;OS outros cinco não comparam nada。

O resultado吗?Você ganhou R$ 25,00。

É claro que Vida real vai ser mais complicada do que exemployment acima;Contudo, vale lembrar que, ao aumentar a taxa de conversão no site， é possível dar mais valor ao tráfego que você já possui。

Os testes A/B também podem ajudar você A descobrir insights relevantes em áreas diversas, como descrição de produtos, mensagens das newsletter tters e conteúdos do blog。Além disso, esses testes também são uma maneira de otimizar continuamente o desempenho da loja。

Devo rodar testes A/B na minha loja?

Depende。Se o seu site presententa um volume baixo de tráfego, o test A/B dificilmente será A estratégia de otimização推荐。在这里，você terá我们可以很好地实现你的梦想usuários你可以很简单地交流你的梦想和你的梦想。

Apesar do que dizem por aí， a otimização da taxa de conversão não acontece exclusivamente via testes。

É só olhar OS números que coletamos nos exemployment acima。51.486 visitas为什么variacaoPara uma melhoria de 10% - e tudo isso com uma taxa atual de conversão de 3%。想象só se você quiser testar uma página de produto: quais são as机会de que você tenha uma página que receba 100 mil visitantes entre duas e quatro semanas?

Opa。你是在做外科手术吗?

简单地说:“有必要为我们做一些事情econômicos，有必要为我们做一些事情média。”

Para contornar o problem, você deve estar pensando:“Sem problemas。É só eu expandir o tempo de aplicação do teste até atingir a amostra estipulada "。

Só que isso também não vai funcionar。

全主要的速度duração测试A/B，主要的são作为机会的机会一个ameaças外部的capazes de afetar os结果。存在一个可能的拜访者，apaguem os cookies de navegação e与新来的人联系的人，和新来的人联系的人;Ou então alguém que já acessou o站点通过桌面决定导航通过智能手机，acessando duas variáveis不同做测试。

欧世佳:deixar o teste rodando por muito tempo também não é uma opção。

简历ópera:os testes A/B podem受益者marcas capazes de atingir作为amostras pré-determinadas dentro de um período de duas A quatro semanas。Se esta não for a realidade da sua loja， é melhor investor em outas estratégias de otimização até que o tráfego orgânico do site aumente de tamanho。

朱莉娅·斯达斯坦科，Shopify的科学家，解释:

Quais variáveis e elements devo testar?

inelizmente, eu não tenho essa resposta。

我有我的世界，有我的世界，有我的世界，有我的世界，有我的世界，有我的世界，有我的世界。

Eu não tenho acesso a esses dados;Eu sequer conheço OS seus clients e OS produtos que você vende。Por isso mesmo, não posso te dizerexatamenteO que você precisa testar。

Você deve tesstar os elements indicados pelos dados internos。

O que eu posso fazer, no entanto， é indicar algumas perguntas que você mesmo pode fazer (e algumas ações de fácil implementação) para nortear a criação ea implementação de testes a /B:

• 注意tecnica:你在哪里?你在哪里?Há atraso no carregamento de alguma página?Tudo bem se o site estiver funcionando nos dispositivos da Apple, mas será que ele funciona também num智能手机da Motorola de 2014?Um site que não funciona corretamente, final, não vai conseguir converter。
• Pesquisas e análises没有网站:antes de realizar um teste A/B, pode ser uma boa ideia安装pequenos弹出窗口que serão exibidos ao longo da experiência de navegação do client。Dessa forma, você pode criar弹出窗口customizados para visitantes que estão navegando pelas mesmas páginas há algum tempo, mas ainda não realizaram nenhuma comppra;乌玛马尼拉德coletar dados importantes e possivelmente otimizar分类conversão do site。
• Conversas com客户:Nada é可以在操作系统客户端中进行对话。采购军刀o que fez essas pessoas escolherem a sua loja e não欧拉;O que eles estavam buscando quando encontraram OS seus productos e serviços;合格é， na opinião deles, o差别que a sua marca oferece。图多是vai ajudar você descobrir o verdadeiro潜在的da sua loja - e a anunciar com segurança。
• Pesquisas de satisfaçãoEssas pesquisas são enviadas apenas para clients que já realizaram ao menos uma comppra na loja (e não para visitantes)。Ao projetar a pesquisa de satisfação da sua loja， é importante que você possa definir de maneira detalhada终结São OS seus clients, quais são OS problem enfrentados por eles OS fatores que entram em jogo na decisão de comppra。Também é important ficar de olho nas palavras e frases que ess clients usam para descrever a马卡。
• Análise de dados:As suas ferramentas para análise de dados estão有什么关系?Não é raro encontrar ferramentas configuration incorretamente, então é melhor dar uma olhada antes de rodar novos relatórios。A análise最后一笔钱，最后一笔钱，最后一笔钱，最后一笔钱，最后一笔钱，最后一笔钱。
• Testes em tempo real:Esses testes são recursos valiosos, pois permitem que você veja OS visitantes navegando no seu site em tempo real。Para melhores resultados, peça que eles realizem uma ação específica (por exemplo, incluir um item de R$ 50,00 no carrinho) e narrem as ações em voz alta。
• 重播comppra:Apesar de serem similares aos testes em tempo real, OS replay de compra são gravações da navegação DOS客户端no site da loja。Isso significa que você está lidando com uma situação que envolveDinheiro e intenção de compra。Os重播são在梅赫拉多斯的pontos da loja que podem ser melhorados。

现存的海洋海洋，海洋海洋você já海洋海洋informações东方海洋海洋A/B。

Como priorizar os testes A/B

Ter uma lista cheia de idea para testes A/B é合法，mas pode não ser speciarmente productiva: na hora de decidir qual teste rodar primeiro， é important saber como priorizar。

Por sorte, existem alguns frameworks de priorização que podem ajudar:

• 冰:em inglês, ICE é um acrônimo para“impacto, confiança e facilidade”(影响，信心和轻松)。Nesse框架，cada um desses três fatores recebe uma nota que varia de 1 a 10。8. Por exemplo: se o teste pode ser rodado sem a ajuda de um desenvolvedor ou designer, a facilidade dele pode ser avaliada em。É uma boa estratégia para determinar a ordem DOS testes, mas se você estiver trabalhando em grupo as notas podem começar a ficar um pouco subjjetivas。Para evitar que isso aconteça，确定algumas diretrzes serem seguidas。
• 派:PIE também é um acrônimo da língua inglesa;意义“潜在的，importância e facilidade”(潜在的，重要性和容易)。“没有ICE，也没有ICE，也没有ICE，就像冒名顶替一样”。8.神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神的神。

Além de ajudarem a priorizar a ordem dos testes a /B, esses框架também podem ser úteis na hora de organizar as ideias。Numa pesquisa que fiz recentente soubre taxas de conversão no e-commerce, usei esses frameworks de inspiração e elaborei três etapas próprias de categorização: implementação, investigação e teste。

• Implementacao:Só há duas opções。Ou não tem jeeito, Ou a solução é óbvia。Então é só呼吸器fundo e seguir em frente。
• Investigacao:é necessário pesquisar a fundo para poder definir o problem e encontrar a solução。
• 证人:A sua idea é现实的基础。Agora é só tesstar !

Curso rápido清醒的睾丸A/B

Antes de rodar um teste A/B， é importante estudar com cuidado as estatísticas envolvidas no processo。

Sim, eu sei que esse tema não é muito流行;mas, infelizmente, faz partte, até porque作为estatísticas são um元素极端相关para o功能，do testes A/B que estamos discutindo。

A partte boa da história é que as ferramentas de teste disponíveis no mercado ficam responsáveis por rodar e avaliar as estatísticas das métricas inseridas;没有entanto， é important que você saiba como avaliar esses dados para poder interpretar corretamente OS resulttos gerados。

亚历克斯·伯基特，中国市场营销协会ob欧宝娱乐app下载地址HubSpot的concorda com a绅士

Definição de média

一个média, como próprio nome já diz， é一个posição intermediária entre o volume mínimo e o volume máximo de alguma coisa。no testes A/B， é necessário encontrar uma média que代表corretamente o todo

Vamos supor que você está tentando encontrar o valor médio para o preço de电子游戏，pois está estudando a可能性de vendê-los na sua loja。Não dá para somar o valor de todos os videogames do mundo para então dividir a quantia pelo número de videogames que existstem nos quatro cantos do planeta: isso é simplesmente impossível。Em vez disso, você vai isolar uma pequena amostra com, por exemplo, 200电子游戏，pararepresentar关于电子游戏。

Definição de variância

一个variância simboliza作为variáveis médias de qualquer situação。Quanto mais alta a variância, menor a precisão dos dados。

Definição de amostragem

全称为o tamanho da amostragem, menor a variância - e, portanto, maior a chance de que a média seja a mais precisa possível。

Se você aumentar o grupo de amostra de 200电子游戏para 2 mil电子游戏，a variação será menor e a média, mais precisa。

Definição de significância estatística

considando que não exstem grandes diferenças entre as variáveis do seu teste, quais são as opportunities de observar resultados relevantes?

Bom，全称为o nível de significância estatística determinado, maiores为机会de que a变体" vencedora " do teste (aquela com os melhores resultados) simplesmente não seja a vencedora。

O motivo é simples:嗯nível baixo de significância estatística pode influciar na determinação da variante vencedora, gerando que chamamos de um falso ftivo。

Isso é特别重要的quando lidamos com ferramentas de teste A/B que determinam A significância estatística sem levar em conta o tamanho da amostra。

偷看拉贾，fundador做CXL研究所，解释器significância estatística um element ento tão important no testes A/B

Definição de regressão à média

É possível que，没有início do teste, você perceba uma flutuação considerável de dados。

Isso é perfeitamente normal, e ligado ao que chamamos de regressão à média: um fenômeno que mostra que, se algo estiver incorreto ou simplesmente夸张na primeira avaliação, provavelmente será ajustado para ficar mais próximo à média na hora da segunda avaliação。

Se você está prestes a interromper um teste só porque atingiu a significância estatística， é provável que o resultado seja um falso positive o。Muitas vezes, a variável vencedora é aquela que sofre o efeito de regressão à média。

Definição de potência estatística

所有的人potência estatística做测试，主要是作为机会variável有机会的人pass despercebida nos result。我有个好机会potência estatística，有个好机会aconteça。

O理想，para testes A/B， é ajustar essa métrica em 80%。

Ton Wesseling, fundador da在线对话， explica a relevância da potência estatística:

---

Você tem uma ideia de negócios?

Comece o seu teste grátis de 14 dias da Shopify hoje mesmo, sem precisar de cartão de crédito!

电子邮件 Começar a avaliação gratuita

---

Definição de ameaças de validade externa

如ameaças de validade externa são fatores externos ao sistema do teste A/B que podem, potenmente, ameaçar A integridade dos dados。

Listamos, abaixo, alguns exemployers:

• Vendas geradas por ocasião做黑色星期五网络星期一;
• 乌玛menção积极的ou消极的na mídia;
• 乌玛campanha de publicidade paga e com alto alcance;
• O dia da semana escolhido;
• 甚至在客户的行动中也能得到帮助。

Digamos que você decida rodar um teste A/B durante o mês de dezembro。A alta demanda gerada pelas festas de fim de ano vai sem dúvida influciar o tráfego da loja, afetando A escolha da variável venencedora。E pode ser que já em janeiro essa variável não esteja gerando bonons resultados。

O motivo吗?

Uma ameaça de validade externa: as festas de fim de ano。

这是一个有意义的问题você这是一个有意义的问题，一个有意义的问题，一个有意义的问题。

Por maiis que não seja possível eliminar as ameaças de validade externa， é possível mitigar o seu efeito。Uma solução, por exemplo， é rodar testes com duração de Uma semana inteira;out a可能é incluir fontes diferentes de tráfego。

我的神，我的神，我的神é我的神，我的神，我的神，我的神。

Como configuration um teste A/B

Antes de criar um testte, você precisa primeiro ter uma hipótese sólida。

祝你平安não é。Na verdade， é a ordem básica para qualquer experimento: um teste, final, prova validade de uma hipótese, e não de uma ideia。

Uma hipótese é algo que pode ser avaliado concretamente;Uma ideia, não。

O teste A/B prova A validade de uma hipótese, e não de uma ideia。

Na hora de formula uma hipótese, tente seguir os três passos propostos por克雷格·沙利文：

• Como eu vi que [inra aqui dados ou feedback da sua pesquisa]，
• É possível que [a mudança ou variável que você vai testar] acabe gerando [o impact previsto]。
• Para verificar isso, vou usar [a métrica escolhida]。

简单,不?Agora tudo o que você precisa fazer é preencher as lacunas e transformar a sua ideia em uma hipótese。

Como escolher ferramenta理想para睾丸a /B

Enfim chegou a hora de escolher a sua ferramenta para testes a /B - e é bem provável que você esteja constando o谷歌优化,一个优化e一VWO．

作为três são优秀者opções。

• O谷歌优化函数de maneira积分ao谷歌分析，o que é卓越的na hora de rodar e avaliar os dados。Além disso，递归方法来解决问题limitações de variável;
• O优化é理想的测试方法não大能人方法técnicas准确定的手动操作方法parâmetros做测试。Das três opções, no entanto, o Optimizely é a que custa mais caro;
• Por último, oVWO， que possui um excente editor de WYSIWYG para iniciantes。Todos os planos de assinatura da ferramenta负鼠热图，pesquisas que podem ser realizadas no site, formulários de análise de dados e muito mais。

Se você preferir, também pode dar uma olhada naShopify App Store: ela está A/B。

deescolher a ferramenta a ser utilizada, basta fazer seu login e seguir as instruções de utilização。O processo服装变化的uma ferramenta para outa, mas geralmente包括instalação de um snippet no site e uma definição objetiva de metas。

测试结果分析A/B

voltandorapidamente para o assto das hipóteses como forma de encontrar insights, veja só o que a Krista Seiden, gerente de produtos e especalista em análise de dados do谷歌， tema dizer清醒的

Com uma hipótese bem公式，mesmo a variante perdedora pode trazer bons resultados: ela vai ajudar você a contrir novos insights, que certamente poderão ser applicados em testes futuros ou então em outras áreas da loja。

Na hora de analisar os resultados do seu teste A/B, concentre se nos insights - e não nos vencdores e perdedores。户田situação pode trazer um novo aprendizado, então não descarte nada;不，这是一个变奏曲!

Com uma hipótese bem formula ada, mesmo a variante perdedora pode trazzer bonons resultados。

outa coisa important para ter em mente é a必要da segmentação na análise de resulttos。Por maiis que uma variante tenha saído perdedora no teste， é bem provável que ela tenha tido um bom desempenho com menos um segmento do seu público-alvo。

E o que é嗯segmento?

• 新生访客;
• 访问者já acessaram a loja ao menos uma vez;
• Visitantes que acessaram通过iOS;
• Visitantes que acessaram via Android;
• Visitantes que acessaram via Chrome;
• Visitantes que acessaram via Safari;
• Visitantes que acessaram通过桌面;
• Visitantes que acessaram通过平板电脑;
• 游客们orgânica;
• 游客vindos de publicidade paga;
• 经由社会之路的chegaram ao site访客;
• 买办que já estavam logados no site。

Deu para ter uma ideia, né?

Pense nos resulttos de um test A/B como um pacte de M&M 's: tem de tudo quanto é cor, e está tudo misturado。O que você precisa fazer é separar cada M&M por cor para descobrir os insights e as informações realmente relevantes。

Além disso, lembrese de que a sua hipótese provavelmente foi provada - mas apenas em alguns segmentos。我有我的未来não我有我的未来，é我有我的未来。

简历ópera:Fazer análise de dados não é só delimitar variante vencedora e variante perdedora。Para encontrar os insights que se escondem além da superfície, concentre-se na segmentação de resultados。É uma habilidade important para se desenvolver, até porque as ferramentas de teste A/B não fazem esse tipo de análise segmentada。

科莫arquivar testes A/B já concluídos

爱你的人você爱你的人A/B amanhã。Será que, daqui a dois anos, você ainda vai se lembrar dos detalhes desse primeiro teste?

Provavelmente nao。

É por isso que é tão重要的arquivar os结果de testes A/B já realizados。Sem arquivo com os registros do que já foi testado e avaliado， é fácil perder de vista os insights poderosos sobre os quais estávamos falando até agora;Além disso, ninguém quer meter o erro de tesstar a mesma coisa duas vezes, não é verdade?

Isso não quer dizer que exista uma maneira " certa " de arquivar e manter esses registros。Se você preferir, pode até procurar uma ferramenta ou app que fique responsável pelos dados, mas o Excel provavelmente vai funciar super bem。

ququer que seja o meio escolhido, lembre-se de registrar:

• hipótese初版;
• Capturas de tela do controle da variante;
• 有权利换取他人的权利;
• Os insights que apareceram durante a análise。

我们的秘密histórico será最重要的时刻expansão马卡。没有未来，também pode ser um recurso para novos funcionários e acionistas。

Como os specialistas fazem testes A/B

集市já detalhamos o processo padrão para a realização de testes a /B, está na hora de ver como os nossos especialistas entrevistados rodam seus testes。

克里斯塔·塞登，做谷歌

O meu processo padrão para realizar testes A/B é começar com A análise de dados - que, na minha opinião, deve ser A base de qualquer ferramenta ou software de testes。内萨·塔帕，吉拉尔的目标分析，吉拉尔的结果，吉拉尔的设计，吉拉尔的洞察力。Isso vai ajudar a determinar os locais e pontos onde há oportunidade para otimização。

Com esses dados em mãos, está na hora de trabalhar a hipótese inicial e tentar descobrir não só o que está dando errado, mas como você pode melhorar ou otimizar as áreas problemáticas do conteúdo。

A terceira etapa lida com construção e implementação dos testes。关于确定时间间隔的解释(欧盟服装，贸易，贸易，贸易，贸易，贸易，贸易，贸易，贸易mudanças贸易，贸易，贸易，贸易，贸易，贸易，贸易，贸易，贸易)

阿普罗维特também para avaliar变型perdedora e veja se ela pode te mostrar algum insight ou resultado que você não havia visto antes。

E, por último, a etapa que só pode ser concluída se você já作为基础para um programa de otimização: a personalização。Você não欧洲与欧洲之间的关系;巴斯塔分析OS dados coletados。

A etapa de personalização极端简单体，como segmentar o conteúdo certo para o público certo, mas também pode复杂体，como A segmentação de usuários个体协调体ações e compportamentos。

Se você ainda está começando, não精确的perder seu tempo pensando nisso: concentrse primeiro nos aspectos básicos。

Alex Birkett, HubSpot的创始人

Eu geralmente sigo o processo abaixo:

• Coleta de dados e verificação das implementações de dados (se elas estão calibradas e devidamente ajustadas);
• Análise de dados e determinação dos insights;
• Transformação de um insight em uma hipótese;
• Priorização de tarefas de acordo comacacto facilidade de aplicação, bem como a alocação de recursos (em special, recursos técnicos);
• Realização do teste, seguindo as práticas recommendation do campo de estatísticas;
• Análise e implementação dos resultados;
• Incorporação e repetição (novos testes)。

Em outas palavras: pesquisar, testar, analisar, e repetir o processo。

Ainda que esse processso posa sofrer pequenas alterações依赖上下文的睾丸，我们的腿，我们的腿，我们的腿，我们的腿。

Além disso, uma das vantagens do modelo acima é o fato de que ele é ágil e capaz de coletar dados de natureza qualativa (como, por exemplo, feedback de customers) e定量:um递归重要的para gerar novas idea de teste preservar os insights encontros。

Ton Wesseling，做在线对话

一个原始的pergunta que fazemos quando precisamos otimizar jornada de um client é: em qual etapa do noso modelo ROAR o produto ou serviço da marca melhor se encaixa?Será que ele ainda está naquela fase de risco onde é necessário fazer muita pesquisa, mas não dá para validar os resultados por meio de experiment online?Ou será que ele já está na etapa de otimização?

• R伊斯科:美丽的容貌，que será então transformada em em modelo de teste, em uma reformulação do design ou reestruturação da proposição de valor;
• OTimização(1):实验em alta escala que vão otimizar a proposição de valor e o modelo commercial;
• OTimização(2):实验de baixa escala que validam a hipótese inicial e servem como uma primeira etapa para determinar as mudanças no design;
• 一个Utomação: se ainda restam visitantes mesmo depois da realização do teste， é melhor usá-los como recurso para experimentar novas técnicas de automação e expandir o alcance da marca;
• REformulação: se as pesquisas não trouxerem mudanças ou novidades, elas podem ser interrompidas por um tempo。

Os insights coletados pelo modelo ROAR nos ajudam a formula uma hipótese principal que, apoiada na pesquisa realizada, vai nos ajudar a formula sub-hipóteses。Essas sub-hipóteses serão priorizadas com base nos dados coletados。

决定论hipótese é verdadeira ou falsa, começamos a realizar ações钢筋混凝土para reformular a jornada do client。

Só não se esqueça de que, em determinado momento, as implementações locais chegarão num nível máximo。Quando isso acontecer， é hora de pensar em uma escala major。

朱莉娅·斯达斯坦科，Shopify的

O目标最初的实验é有效的hipótese de que realizar alterações numa página da互联网já存在的pode gerar um正面影响没有desempenho da empresa。

Antes de realizar um test A/B， é重要决定因素é realmente necessário。Por exemplo:存在，没有站点da loja，嗯botão com uma taxa de cliques extremamente baixa。真诚的朋友impossível小弟弟botão;Isso signa que validar a hipótese de alterar o botão ou removê-lo (ou seja, realizar um experimento) não é algo necessário。

Se a mudança sugerida para o botão é muito pequena, também não vale apena contrir um teste apenas para provar que aquela mudança pode trazer um resultado minimamente related。Nesse caso， é melhor implementar as mudanças e simplesmente monitorar o desempenho do botão。

Em situações nas quais um teste é absolutamente necessário e pode trazer resultados relevantes, a segunda etapa do processo é definir a(s) métrica(s) que devem ser otimizadas (no exemplo acima, seria aumentar a taxa de conversão de um botão)。

A terceira etapa é dividir aleatoriamente o público-alvo em dois grupos: um que vai receber A versão existente do botão e outo que vai receber A versão de teste。A类群de conversão dos dois grupos é monitorada e, quando A significância estatística用于atingida, os resultados do experimento são determinados。

窥视拉贾，做CXL学院

Os testes A/B fazem partte de um cenário主要电压para otimização das taxas de conversão。É por isso que, na minha opinião， é um tema que包含80% de pesquisa e apenas 20% de testes;E uma boa pesquisa, aliás, vai ajudar você a determinar o que deve ser testado。

O meu process de testte geralmente funcciona da sergute maneira:

• Realização de uma pesquisa清醒的taxas de conversão para鉴定问题没有地点;
• Seleção关于优先问题的问题está关于访问者的空间空间的问题usuários -关于空间空间的头脑风暴的问题soluções possíveis。O processo deve ter, como base, os insights coletados na pesquisa。Em seguida， é necessário决定性的不合格的测试，vai ser实现(desktop e dispositivos móveis pedem testes diintos);
• Determinação do número de variantes a serem testadas (isso vai dependent do volume de tráfego e/ou do nível da transação);
• Estipulação das soluções (novo conteúdo escrito, alterações pontuais no design…)。dependdo do escopo das alterações, pode ser uma boa ideia incluir um designer no process;
• Implementação dessas soluções na ferramenta de teste (isso deve ser realizado por um desenvolvedor)， definição dos objetivos e outras configurações adicionais;
• Realização do controle de qualidade no teste para garantir que tudo está funcionado;
• Realização做测试!
• Com os resultados do teste em mãos， é hora de realizar uma análise dos resultados;
• 依赖dos结果，implementação da variante vencedora ou incorporação das soluções。

Chegou a sua vez

Agora que você já conhece o processo de testes A/B mais A fundo, está na hora de aplicá-lo没有desenvolvimento da sua loja。

美国银行分拣器!

---

清醒

Carolina Walliter é escritora, tradutora, intérprete de conferências e editora-chef do blog da Shopify em português do Brasil。

发布原始em inglês: Shanelle Mullin

Tradução e localização: Marcela Lanius