Teste A/B do Ciclo de Vida

Nesta página, iremos explicar o que significa fazer testes A/B aos seus Ciclos de Vida, porque deve considerar implementá-lo e como começar.

​🤷‍♂‍ O que é teste A/B para Lifecycles?

Teste A/B, também conhecido como teste dividido, é uma forma de comparar diferentes versões de um Lifecycle testando a resposta dos seus jogadores à versão "A" contra a versão "B", determinando qual das duas versões é mais eficaz ao observar os dados de conversão coletados.
Em resumo: realizar O teste A/B permite que você compare o sucesso de diferentes versões de um Lifecycle.

​🤔‍ Por que você deveria realizar testes A/B nas versões do seu Lifecycle?

Acreditamos que sempre há espaço para melhorias e, ao não utilizar testes A/B, você perde informações valiosas que podem ajudar a melhorar o engajamento dos seus jogadores.
Realizar testes A/B nos seus Lifecycles dá a você a oportunidade de tomar decisões fundamentadas sobre como evoluir o engajamento dos jogadores para melhor.

​⚙‍ Como funciona?

Quando você tem 2 ou mais versões de um Lifecycle, pode executar ambas ou todas simultaneamente permitindo que o sistema filtre os jogadores entre todas as versões ativas. Você simplesmente decide a divisão percentual entre as diferentes versões.
Decida a divisão percentual entre as versões
Decida a divisão percentual entre as versões
Dependendo da divisão percentual que você definiu para as diferentes versões, os jogadores que entrarem no Lifecycle serão distribuídos de acordo com esses números.
​👩‍🏫‍ Exemplo:
Supondo que você tenha 2 versões que gostaria de atribuir ao seu Lifecycle: Versão 1: 50% Versão 1.1: 50%
Quando um jogador entra no Lifecycle (ao cumprir as condições de entrada do Lifecycle), esse jogador tem uma chance de 50% de entrar na Versão 1, bem como uma chance de 50% de entrar na Versão 1.1.
Além disso, o sistema também atribui os jogadores aleatoriamente a cada versão. Isso significa que, se 100 jogadores entrarem no Lifecycle, a divisão não será necessariamente 50 jogadores em uma versão e 50 na outra. Em vez disso, a divisão poderia ser 55 jogadores na versão 1 e 45 jogadores na versão 1.1 para os primeiros 100 jogadores.
​🙋‍ Por favor, note; seguindo o exemplo acima.
Devido ao fator aleatório, nunca haverá uma "divisão perfeita" de acordo com a configuração percentual. No entanto, quanto mais jogadores entrarem no Lifecycle, a divisão se equilibrará cada vez mais e se tornará mais precisa de acordo com os números que você definiu.

​🛠‍ Como você implementa isso?

Para realizar testes A/B, você precisa ter pelo menos 2 versões no seu Lifecycle. Então, dependendo se você tem uma versão do Lifecycle em produção ou não, o processo de executar com versões adicionais é ligeiramente diferente.

Nenhuma(s) versão(ões) do Lifecycle em Produção

Sem versões do Lifecycle em produção e com 2 versões em pronto, é assim que e onde você selecionaria as versões para torná-las ativas:
PRONTO estágio > Preparar para lançamento
Selecionando versões para tornar ativas
Selecionando versões para tornar ativas
Por padrão, como você pode ver à direita na imagem acima, a divisão percentual será feita automaticamente e a divisão será distribuída uniformemente entre as versões selecionadas. No entanto, você sempre pode alterar essas configurações conforme desejar.

Versão(ões) do Lifecycle já em Produção

Se você já tem uma versão do Lifecycle, ou mais, em produção e deseja ativar uma versão adicional, é aqui que deve fazê-lo:
PRONTO ou PROD estágio > Editar > Modificar Condições de Entrada
Selecionando versão(ões) para ativar
Selecionando versão(ões) para ativar
Continue com a divisão percentual padrão, ou altere conforme suas necessidades, e Atualizar Configuração.

​👩‍🔬‍ Analisando os Resultados

Depois de executar seu teste A/B por algum tempo, e tempo suficiente para que jogadores tenham passado pelo Lifecycle e tenhamos dados suficientes, é hora de analisar os resultados.
É aqui que você obterá informações valiosas sobre qual versão do Lifecycle teve melhor desempenho em diferentes áreas.
Você pode acessar facilmente os dados de conversão dentro do seu Projetos de Lifecycle, ao passar o cursor sobre o projeto de Lifecycle que você deseja analisar:
Ver Conversão do Lifecycle
Ver Conversão do Lifecycle
Aqui serão apresentadas as análises de conversão para as versões do Lifecycle que estão incluídas no seu projeto de Lifecycle.
Você pode ver o Resumo da Versão do Lifecycle, seguido por vários gráficos e outros dados interessantes:
Análises de conversão
Análises de conversão
Por favor, note: dados ligeiramente diferentes serão exibidos nas análises de conversão do seu Lifecycle dependendo do modelo de Lifecycle que você usou. Simplesmente ajustamos as análises de conversão para mostrar as informações mais relevantes para o modelo escolhido.

​🔢‍ Entendendo os números

Voltando ao Resumo da Versão do Lifecycle, é aqui que você pode obter as informações mais valiosas, pois pode rapidamente ter uma boa compreensão do desempenho geral do seu teste A/B:
Resumo da Versão do Lifecycle
Resumo da Versão do Lifecycle
As informações encontradas aqui são bastante diretas e autoexplicativas.
Olhando para os dados de conversão da Versão 1 e da Versão 2 (as 2 diferentes versões do Lifecycle que foram usadas no teste A/B), no exemplo acima, podemos ver que a Versão 2, no geral, teve um desempenho muito melhor:
  1. A Versão 2 teve uma taxa de conversão mais alta (= mais jogadores que entraram nesta versão do Lifecycle fizeram seu primeiro depósito)
  2. Os jogadores pertencentes à Versão 2 tiveram uma média de primeiro depósito mais alta (= seu primeiro depósito foi, em média, um valor mais alto em comparação com os depósitos dos jogadores pertencentes à Versão 1)

​❌‍ Como remover o teste A/B

Se você executou um teste A/B com versões do Lifecycle, analisou os dados e agora está pronto para parar os testes - é assim que você para uma versão específica:
PRONTO ou PROD estágio > Editar > Modificar Condições de Entrada > Desmarque a versão que você quer parar de executar > Verificar e lançar
Desativar Versão do Lifecycle
Desativar Versão do Lifecycle
Isso moverá a versão desmarcada de volta para o PRONTO estágio novamente. Observe que a versão seria parcialmente parada nesta etapa, significando que jogadores seriam impedidos de entrar nesta versão do Lifecycle, mas quaisquer jogadores atualmente dentro ainda permaneceriam nela e acionariam quaisquer Atividades relevantes.
Caso deseje desativar a versão do Lifecycle e todas as Atividades, clique na versão para entrar em uma nova página e DESATIVAR ela no canto superior direito.
Desativar Versão do Lifecycle
Desativar Versão do Lifecycle

​🔝‍ Melhor Prática

Como boa prática, recomendamos que você combine testes A/B com Grupos de Controle.
Esta é uma forma recomendada de usar ambos os recursos para o seu Lifecycle:
  1. ​🛂‍ Implemente um grupo de controle na Versão 1 (sua primeira versão) Depois de executar a Versão 1 por algum tempo, é hora de analisar os dados de conversão.
    O Grupo de Controle funcionará como um parâmetro de referência e ajudará a analisar o sucesso da sua primeira Versão do Lifecycle. Ao analisar os dados de conversão coletados da Versão 1, em combinação com os dados do Grupo de Controle, você geralmente encontrará algumas áreas de melhoria. Esta será a base para criar sua segunda versão para executar o teste A/B.
  2. ​🔎‍ Crie sua Versão 1.1 (segunda versão) com base na sua análise da Versão 1 Crie sua Versão 1.1 clonando a Versão 1 e implementando as mudanças que você acredita que irão melhorar o engajamento dos jogadores, com base na análise da sua Versão 1. Execute o teste A/B por algum tempo antes de analisar e comparar os resultados da Versão 1 e da Versão 1.1.
  3. ​✨‍ Três sugestões sobre o que fazer em seguida Com base nos resultados do teste A/B, listamos 3 opções diferentes sobre o que você pode fazer a seguir:
    1. 🔁‍ Continuar o teste A/B Se não houver diferença significativa entre as versões até agora, você pode optar por continuar executando o teste A/B para coletar mais dados e analisar novamente mais adiante. 2. ➕‍ Testar A/B com uma versão diferente Se uma versão claramente teve desempenho melhor que a outra, você pode decidir parar de executar a versão que teve desempenho pior e então substituí-la por uma nova versão melhorada mais uma vez. Dessa forma você continua a testar A/B e evoluir seu Lifecycle para obter a melhor versão possível em execução. 3. 🛂‍ Parar o teste A/B e implementar novamente um Grupo de Controle Se uma versão claramente teve desempenho melhor que a outra e você não deseja continuar testando A/B no momento, você pode simplesmente desativar a versão que teve desempenho pior. Mantenha a versão do Lifecycle com melhor desempenho e implemente novamente um Grupo de Controle.
Se você ainda não o fez, recomendamos que também leia sobre Grupos de Controle de Lifecycle: o que é, quais são os benefícios e como configurá-lo. Leia tudo aqui.