Os dados são atualizados regularmente na página do grupo de mediação. Durante o período de 90 dias do teste, você pode finalizá-lo a qualquer momento com base nos dados gerados e adotar uma das variantes. Isso significa aplicar uma delas como configuração do grupo de mediação para 100% dos seus usuários.
Como acessar e monitorar seu teste A/B:
- Faça login na sua conta da AdMob em https://admob.google.com.
- Clique em Mediação na barra lateral.
- Selecione o grupo de mediação que tem o teste A/B que você quer ver.
Para ajudar você a analisar os resultados do seu teste, a AdMob informa os ganhos mensais estimados das variantes A e B. Essa métrica é uma projeção de quanto você receberá em 28 dias se aplicar essa variante a 100% dos usuários. Assim, você tem uma comparação realista e uma análise mais precisa do desempenho de cada variante.
Confira a diferença nos ganhos mensais estimados na parte superior da página do teste A/B para entender o quão diferentes as variantes são.
Os gráficos ilustram a performance das origens de anúncios em cada variante para você comparar facilmente os resultados de uma origem nas duas variantes. Esses gráficos facilitam a interpretação dos resultados do experimento. O gráfico de resumo mostra uma visão geral das principais métricas. Passe o cursor sobre uma métrica no gráfico de resumo para determinar a performance de cada variante para essa métrica principal.
Você vai encontrar a receita dimensionada, o eCPM, a taxa de correspondência e as impressões dimensionadas das variantes A e B, que serão atualizadas durante o teste. Clique em uma guia para cada métrica e analise um gráfico de linhas com mais detalhes. Cada gráfico de linhas mostra dados diários e a variante B como uma mudança percentual em comparação com a variante A.
Entender os resultados
Quando um teste começa, a AdMob compara os ganhos mensais estimados nas duas variantes para determinar qual delas terá a melhor performance. A AdMob exibe a variante líder na página do teste A/B depois de determinar que uma delas teve resultados consistentes e substancialmente melhores do que a outra. Ela também informa uma ação recomendada: "Manter original" (se a performance da variante A tiver sido melhor) ou "Aplicar variante" (se a variante B tiver um resultado superior).
Para fazer ajustes em um teste enquanto ele está ativo, clique em Editar teste. Isso vai encerrar o teste atual e criar um rascunho de um novo teste com as mesmas configurações que podem ser editadas. Para garantir resultados e recomendações precisos, não é possível editar os testes em tempo real. Lembre-se de que leva tempo para alcançar resultados. Portanto, evite encerrar o teste prematuramente com base nos resultados iniciais.
A AdMob determina a variante mais favorável e a probabilidade percentual estimada usando os seguintes critérios:
- A frequência com que a performance da variante mais favorável se mantém melhor.
- A magnitude da diferença entre as duas variantes.
- O volume de dados disponíveis. Recomendamos que você escolha um bloco de anúncios com tráfego significativo para aumentar a quantidade de dados disponíveis durante o teste. O teste precisa receber pelo menos 10.000 solicitações de anúncios para que a AdMob determine os resultados.
Uma consistência e uma diferença maiores na performance, assim como um grande volume de dados, ajudam a AdMob a aumentar a probabilidade percentual estimada.
Se nenhum desses critérios for atendido, a AdMob não conseguirá definir a variante mais favorável. Nesse caso, não haverá resultados conclusivos na página do teste A/B. No entanto, ainda é possível conferir as métricas do teste para cada variante.
Sobre a definição da alocação de usuários para a variante B
Quando a alocação do usuário é definida como menos de 50%, os dados da variante B são um cálculo em escala. Isso significa que os dados são uma comparação justa, porque a AdMob calcula as informações da variante B como se ela estivesse recebendo uma divisão de usuários igual.
Por exemplo, se a alocação do usuário para a variante B for definida como 10%, os ganhos estimados serão multiplicados por 9. Isso permite que você faça uma comparação justa com a variante A (que tem uma alocação de 90% dos usuários). Assim, se a variante B receber US$ 10, o cálculo em escala dos ganhos da variante B será de US$ 90.
O que fazer
Recomendamos que você aguarde pelo menos duas semanas com o teste em execução para tomar alguma decisão.É possível escolher uma variante a qualquer momento durante os 90 dias. Isso significa aplicar uma delas como configuração do grupo de mediação para 100% dos seus usuários.Ao escolher uma variante, considere a diferença nos ganhos estimados e a probabilidade percentual estimada.
Você pode optar por manter a variante A ou aplicar a variante B:
- Para selecionar a variante A, clique em Manter a variante A. Isso significa que a configuração original do seu grupo de mediação será mantida.
- Para escolher a variante B, clique em Aplicar a variante B. Assim, incluiremos as definições da nova variação à sua conta.
Se você não escolher uma variante no fim dos 90 dias, o teste será interrompido, e a variante A será usada em 100% dos usuários, mesmo que ela não tenha sido a mais favorável.
Você terá 30 dias após o término do experimento para escolher uma variante. Após isso, o teste expirará, e a variante B será excluída.