Evitar efeitos de interação com grupos de exclusão
Para experimentos simultâneos relacionados, é importante que os jogadores vejam apenas um dos experimentos para evitar resultados distorcidos. É aí que entram os grupos de exclusão. Os grupos de exclusão do PlayFab permitem criar experimentos mutuamente exclusivos. Com um grupo de exclusão, você limita o público-alvo participante (jogadores) a participar de um experimento por vez. Isso garante que os mesmos usuários não vejam experimentos sobrepostos em um grupo de exclusão. Isso significa que os dados coletados para um experimento não são afetados por nenhum outro experimento, mesmo que ambos estejam configurados no mesmo fluxo de jogo e tenham como alvo o mesmo conjunto de jogadores. Em um grupo de exclusão, a alocação de tráfego ocorre sem sobreposição dos dados dos jogadores entre os experimentos e é distribuída aleatoriamente em diferentes buckets de jogadores para cada experimento. Isso garante resultados limpos, em que a alteração na taxa de conversão é atribuída ao experimento correto, sem viés nem sobreposição do público-alvo, eliminando quaisquer efeitos de interação. Para experimentos não relacionados, não importa se seus jogadores fazem parte de mais de um experimento. No entanto, se os experimentos estiverem relacionados como abaixo, com agendas de execução simultâneas ou sobrepostas, talvez você queira manter os jogadores exclusivos de cada experimento:- Variação de configurações no mesmo fluxo de jogo
- Variação de configuração envolvendo o mesmo funil, em que há possibilidade de sobreposição de jogadores
O uso de grupos de exclusão reduz o poder estatístico dos seus experimentos, pois cada um compete com os outros por tráfego. Portanto, use grupos de exclusão quando os experimentos estiverem relacionados e houver previsão de efeitos de interação.
Criar um grupo de exclusão
No Game Manager:- Navegue até seu Title
- Selecione Experiments no menu à esquerda
- Selecione Experiment Settings no lado direito da página; a página de configurações será aberta
- Em Exclusion Group, selecione Add exclusion group
- Insira o Name e a Description do grupo e selecione Save
Se determinados experimentos estiverem em execução em um grupo de exclusão, esse grupo de exclusão não poderá ser excluído até a conclusão da execução dos experimentos nele contidos.
Criar um experimento com grupo de exclusão
Na página Experiments do Game Manager:- Selecione New Experiment; a página de configuração do experimento será aberta
- Insira os detalhes de configuração do experimento, como Experiment Name, Description, Start Date & Time e Duration (até 90 dias)
- Selecione o público-alvo do experimento. Por padrão, o público do experimento é “Run across all title players”. Para executar o experimento em um segmento, selecione o botão de opção “Select player segment” e faça a seleção na lista suspensa
- Para executar um experimento mutuamente exclusivo, configure em Exclusion Group selecionando o botão “Add exclusion group”
- Selecione o grupo de exclusão na lista suspensa do Exclusion group name existente
- Insira a % traffic allocation, que é a porcentagem do tráfego total qualificada para o experimento
- Se a % traffic allocation for maior que o Available traffic %, o agendamento ou a execução imediata do experimento não será mantido
- Em Variants, defina a Control Variant e as Treatment Variant(s)
- Selecione Schedule, Save as Draft ou Run Now
