Teste A/B com Mopinion 17 de fevereiro de 2023

Especialistas em CRO e profissionais de marketing de crescimento colocam grande ênfase na experimentação e no teste A/B. O teste A/B, ou teste A/B, é uma forma de testar duas versões de conteúdo e comparar seu desempenho. O objetivo de um teste A/B geralmente é ver qual versão leva a mais conversões e a um CTR mais alto. Os dados qualitativos geralmente não recebem tanta atenção quanto os números brutos. Por exemplo, um teste A/B específico pode levar a mais conversões ou cliques em um determinado botão, mas a experiência ou sentimento dos usuários pode não ser melhor. O clique no botão pode ter acontecido porque você não estava claro sobre o que aconteceria se o visitante clicasse no botão.
É por isso que acreditamos ser importante coletar feedback para seus testes A/B e capturar dados qualitativos também.

Neste artigo, mostraremos duas maneiras práticas de realizar testes A/B com o Mopinion .

1. Usando formulários de feedback para medir como os usuários experimentam duas versões diferentes de um teste A/B.
2. Testar dois formulários de feedback diferentes para medir qual deles tem uma taxa de resposta mais alta.

O feedback do cliente online também pode ajudá-lo a formular hipóteses que não se baseiam apenas em suposições. Com base no feedback que você coleta, você pode identificar os problemas que seus clientes têm em seus canais online. Você pode usar essas informações como entrada para testar diferentes hipóteses. Mas neste artigo, vamos nos concentrar nos dois pontos acima.

Sem tempo para ler o artigo inteiro? Assista ao vídeo em que eu (Growth Marketer na Mopinion) explico como você pode fazer testes A/B com a Mopinion.

O que é teste A/B?

O teste A/B permite que você teste duas versões de conteúdo para ver qual delas funciona melhor. Você atende a 50% de seu público uma versão do conteúdo, variante A, enquanto atende aos outros 50% a outra versão do conteúdo, variante B. A distribuição deve ser aleatória.

Em seguida, você mede a taxa de conversão, a taxa de cliques ou a experiência do cliente para ver qual versão do seu teste tem melhor desempenho. Com um tamanho de amostra grande o suficiente, você obterá um resultado estatisticamente significativo e saberá qual versão leva ao objetivo pretendido e, portanto, tem melhor desempenho. Essa será a versão que você realmente implementará e trará a melhoria desejada.

O que você pode testar A/B?

Os testes A/B geralmente são feitos em canais digitais, como páginas de sites, aplicativos e e-mails. Nas páginas (de destino) em seus sites ou no aplicativo, você pode testar muitas variáveis, como:

• Títulos e subtítulos
• Cópia do corpo
• cores
• Tipo de conteúdo (vídeo, imagem, texto, conforme imagem abaixo)
• Disposição
• Projeto
• Chamadas para ação (CTAs)
• Navegação
• Formulários de feedback

Com o teste A/B em e-mails, você pode testar a linha de assunto , o layout , o comprimento do e-mail e até a hora do dia em que você envia o e-mail.

O teste A/B não se limita aos seus próprios canais. Você também pode testar anúncios sociais e anúncios de pesquisa para ver quais direcionam mais tráfego para seu site e quais têm maior probabilidade de converter visitantes. Aqui você também pode brincar com cores , design e CTAs .

Formulários de feedback também são potenciais para testes A/B. Você não gostaria de saber que tipo de formulário de feedback fornece mais insights? Dentro de um formulário de feedback, há novamente muitas coisas para testar, como layout , cópia , design , ordem das perguntas , tipo de pergunta , tipo de formulário de feedback , como e quando ele é acionado e muito mais. Alterar uma das variáveis ​​pode ter um impacto positivo na taxa de resposta de seus formulários de feedback.

Por que você deve fazer um teste A/B (com Mopinion)?

Com os testes A/B, você poderá fazer alterações significativas e baseadas em dados em seu site, aplicativo, e-mail ou outro canal digital que realmente levem às melhorias pretendidas. Isso pode variar entre maior ROI, mais conversões, melhor experiência do cliente e muito mais. O teste elimina as suposições e suposições.

Agora vamos nos concentrar em por que você deve iniciar o teste A/B com o Mopinion especificamente. Vamos nos concentrar nas duas maneiras de A/B com Mopinion, conforme indicado acima.

1. Usando formulários de feedback para medir como os usuários experimentam duas versões diferentes de um teste A/B.

Medir como seu público experimenta as duas versões de seu teste A/B fornecerá dados qualitativos. Ele fornece informações sobre o sentimento e a opinião do seu público. Por exemplo, você está fazendo um teste A/B em seu e-mail com diferentes tipos de conteúdo. Seu público pode dar uma classificação e deixar um comentário aberto em um formulário de feedback em seu e-mail. Seu teste A/B pode levar a classificações diferentes das duas versões. Isso afeta seu CSAT, NPS ou qualquer outra coisa que você esteja medindo e fornece insights sobre o sentimento de seu público. Os comentários abertos lhe dirão mais sobre por que uma determinada classificação é dada e por que pode haver uma diferença para suas duas versões. Os comentários abertos também informam sobre a opinião geral do seu público. Ao lado de metas quantitativas baseadas em CTR e conversões (de vendas), você saberá o que seu público pensa das duas versões do seu e-mail.

Embora não seja comum ter metas que não estejam diretamente relacionadas aos números brutos de vendas, pode ser que seu foco esteja em criar uma melhor experiência do usuário. Uma experiência aprimorada pode e geralmente afeta positivamente as métricas de vendas. Também encorajamos você a coletar feedback nesse caso, dê uma olhada no exemplo a seguir.

Digamos que você queira melhorar a experiência do usuário em uma página de site específica. Você deseja medir o tempo na página, número de páginas visitadas ou profundidade de rolagem. Sua variante experimental (B) leva a mais páginas visitadas e a um tempo mais longo na página, o que pode indicar uma melhor experiência no site. No entanto, também pode ser um sinal de que os visitantes não conseguiram encontrar as informações que procuravam e, portanto, precisaram de mais tempo ou visitaram mais páginas para encontrá-las. Você precisará coletar dados qualitativos para saber se sua mudança teve um impacto positivo real na experiência.

2. Testar dois formulários de feedback diferentes para medir qual deles tem uma taxa de resposta mais alta.

Para a segunda maneira de teste A/B com Mopinion – quando você conduz testes A/B com seus formulários de feedback, como ordem de pergunta ou design de formulário – você poderá determinar qual formulário de feedback fornece mais respostas ou comentários abertos e assim, a maioria dos insights.

Duas formas de teste A/B com Mopinion

1. Usando formulários de feedback para medir como os usuários experimentam duas versões diferentes de um teste A/B

Exemplo:
Você está fazendo um teste A/B em uma página de destino do seu site. Você alterou o layout da sua página conforme a imagem acima. Você está medindo a satisfação do cliente e deseja saber se a classificação média por variante é diferente . Depois de realizar o teste, sua variante original (A) tem uma classificação média de 3/5 , enquanto a variante experimental (B) tem uma classificação média de 5/5 . Com um tamanho de amostra grande o suficiente e um resultado significativo, você pode dizer que a diferença na classificação se deve às alterações feitas em sua variante B. É uma indicação clara de que seus visitantes estão mais satisfeitos com a variante da experiência e você deve implementar as alterações na página.

Como fazer isso com o Mopinion?

A implementação de um formulário de feedback em seu teste A/B não é muito difícil, você só precisa de 1 formulário. Você pode manter o formulário original se já tiver um ativo na página que está testando ou criar um novo formulário de feedback e colocá-lo ativo na página. Você precisa ter certeza de que está disponível para 100% do seu público.

Tudo o que você precisa fazer é colocar um elemento de dados em seu formulário de feedback. O elemento de dados precisa ser capaz de indicar em qual variante o feedback foi fornecido – A ou B. Veja na imagem abaixo como isso ficará em seu formulário de feedback*.


Design de formulário de feedback Mopinion - elemento de dados de teste A/B

A próxima imagem mostra como ficará no item de feedback na caixa de entrada. Cada feedback fornecido enviará a variante para o Mopinion e aparecerá nos itens de feedback individuais na caixa de entrada. Dessa forma, você sabe qual item de feedback pertence a qual variante de teste.


Caixa de entrada de feedback do Mopinion - Visibilidade da variante do teste A/B

Você pode acompanhar facilmente seus experimentos em seu painel. Você pode fazer isso criando um gráfico e filtrando a classificação com base nas variantes (com o elemento de dados). Veja a captura de tela abaixo de como fica no painel. Você pode ver que a classificação média para a variante A original é 3, enquanto a classificação para a variante experimental B é 5. Você também pode ver se isso muda com o tempo ou por segmento de público ao criar seu gráfico, há infinitas possibilidades.


Gráfico Mopinion – avaliação média do teste A/B por variante

Ao ver uma diferença em seu painel por condição, você deve se aprofundar nos itens de feedback por variante e ler os comentários abertos. Talvez você encontre um motivo para a diferença na classificação e tenha uma amostra do sentimento e dos pensamentos de seu público.

Em nossa base de conhecimento, você encontra um guia passo a passo sobre como realizar um teste A/B com o Mopinion. Escrevemos um guia para três ferramentas de teste A/B diferentes: Google Optimize, Optimizely e AB Tasty. É claro que nossa equipe de suporte está aqui para ajudar se você estiver usando outra ferramenta de teste A/B e quiser coletar feedback em seus testes A/B.

* A captura de tela com o elemento de dados é baseada no Google Optimize

2. Testar dois formulários de feedback diferentes para medir qual deles tem uma taxa de resposta mais alta.

Exemplo:
Você deseja testar dois formulários de feedback diferentes em uma página da Web e ver qual obtém mais respostas do seu público. Você quer saber se o seu formulário de feedback conversacional obtém mais respostas do que o seu formulário Mopinion clássico. Depois de realizar o teste, você tem 75 respostas em seu formulário de conversação e 50 respostas em seu formulário clássico , enquanto os formulários são abertos com a mesma frequência. Com respostas suficientes e visualizações suficientes no formulário de feedback, você pode dizer com certa confiança que o formulário de feedback Conversacional obtém mais respostas e, portanto, oferece mais insights.

Como fazer isso com o Mopinion?

É muito fácil fazer isso com o Mopinion, pois você pode implantar dois formulários diferentes na mesma página da web ou aplicativo ou e-mail. Você precisará mostrar seus formulários para o mesmo número de pessoas para um teste justo. Cada variante será mostrada para metade do seu público, então a divisão deve ser 50/50. A primeira forma (variante A) é apresentada a 50% dos visitantes. O outro formulário (variante B) é mostrado para 100% dos visitantes que não viram o primeiro formulário. Além disso, um atraso de 1 segundo ajuda a garantir que os dois formulários não sejam exibidos ao mesmo tempo.


Implantação do Mopinion – Dois formulários na mesma página para teste A/B

Uma vez que o feedback começa a chegar, você pode comparar o feedback entre as duas condições, como a taxa de resposta, classificação (por exemplo, CSAT, NPS) e, claro, os comentários abertos. Você pode acompanhar facilmente seu experimento adicionando os dois formulários no mesmo gráfico e comparando o número de respostas.

Vamos levá-lo através de um exemplo da vida real de um teste A/B que fiz com formulários Mopinion.

Como o Mopinion usa o Mopinion para realizar testes AB

Em outubro de 2022, testei o formulário de feedback passivo em nossa página inicial, um formulário de feedback de conversa em comparação com um formulário de feedback clássico. O objetivo do meu teste A/B era entender qual formulário de feedback obtém mais respostas e qual obtém uma classificação mais alta. Minha hipótese era que os formulários de feedback conversacional obteriam mais respostas e uma classificação mais alta do que os formulários clássicos de feedback.


Painel Mopinion – Respostas do teste A/B do formulário de feedback


Painel Mopinion – Avaliação média do teste A/B do formulário de feedback

Aqui você pode ver os resultados do meu experimento e como ele fica no meu painel pessoal. Minha primeira hipótese foi suportada (não significativamente**), pois o formulário de feedback de conversação recebeu 11 respostas a mais do que meu formulário clássico. Minha segunda hipótese não foi suportada (novamente não significativamente), pois a forma clássica teve uma classificação média de 3,8, que é 0,2 pontos a mais do que a minha forma de conversação.

Ao realizar testes A/B com seus formulários de feedback, você aprende qual formulário de feedback fornece mais respostas e mais insights.

Se você quiser começar a testar diferentes formulários de feedback do Mopinion, acesse nossa base de conhecimento, onde encontrará nosso guia passo a passo.

** O teste não foi feito por tempo suficiente para obter um efeito significativo, mas com mais itens de feedback você poderá obter um efeito significativo

Inicie o teste A/B com a ajuda do Mopinion

Para concluir, o Mopinion é uma grande ajuda para seus testes A/B. Ele ajuda você a obter dados qualitativos sobre testes A/B e entender o sentimento e a experiência do seu público. Ele enriquece os dados quantitativos de seus testes com dados qualitativos. Além disso, ajuda você a entender que tipo de formulário de feedback obterá mais respostas e insights.

Desejamos-lhe boa sorte para os seus testes A/B!