Testar quando o custo de meios muda todas as semanas: quanto tempo deixar correr uma variante e quando o dado é fiável.

Janelas curtas e decisões rápidas

Três referências de duração.

Um teste não dura mais de uma semana: para lá disso, o ambiente mudou demasiado para a comparação aguentar.

Também não dura menos de três dias: abaixo disso, está a ler ruído, mesmo quando os números parecem claros.

E para num limiar de investimento, não num número de dias: uma variante que não atingiu um volume de compras suficiente nada demonstrou.

Uma consequência prática: decida esse limiar antes de lançar, e escreva-o. A tentação de parar um teste ao segundo dia, quando uma variante parece perder, é a primeira fonte de más decisões.

Comparar com a testemunha, nunca com o mês passado

Três razões, todas estruturais.

O custo de meios varia muito de uma semana para outra, e varia para toda a gente ao mesmo tempo.

O preço indicado do seu produto mexe-se, o que desloca mecanicamente a taxa de conversão.

E a sazonalidade local é marcada: os períodos de pagamento, as férias e o regresso às aulas mudam o comportamento de compra em poucos dias.

Um teste correto isola portanto uma só variável: o criativo. Todo o resto, público, orçamento, dia, colocação, tem de ser igual entre testemunha e variante.

Ganchos, não vídeos novos

Três razões para testar o primeiro segundo em vez do vídeo inteiro.

É a parte que explica a maioria das diferenças de desempenho.

É a mais barata de produzir: três ganchos sobre o mesmo corpo de vídeo custam uma montagem, não uma rodagem.

E é a mais rápida de concluir: uma diferença de gancho vê-se nos dados de retenção antes mesmo de olhar para as compras.

Três variantes por ciclo chegam. Para lá disso, o orçamento dispersa-se e nenhuma variante atinge o limiar que tornaria fiável a sua medição.

O que medir quando o cabaz muda

Três indicadores, por esta ordem de fiabilidade.

A taxa de retenção aos três segundos, que não depende do preço nem do poder de compra: é a medida mais estável de que dispõe.

A taxa de clique, que depende um pouco do contexto mas continua comparável entre duas variantes lançadas no mesmo dia.

E o custo por compra, o mais útil comercialmente, mas o mais sensível às variações de preço: só se compara dentro da mesma janela.

Um indicador a manejar com prudência: a faturação gerada. Mistura o efeito do vídeo e o efeito do preço, e torna-se enganador assim que passa uma promoção.

Guardar a lição, não o vídeo

Três consequências para o que se segue.

O que se conserva é a regra aprendida: que ângulo funcionou, que promessa, que tipo de pessoa.

O que se gasta é o próprio vídeo: um criativo vencedor esgota-se em poucas semanas, seja qual for o sucesso inicial.

E o que se volta a jogar é a estrutura: voltar a filmar o mesmo ângulo com outro criador dá um vídeo novo sem começar do zero.

Um hábito simples que vale dinheiro: mantenha um diário de testes, uma linha por variante, com a data, o ângulo, o resultado e a decisão. Sem esse diário, compra-se duas vezes a mesma lição.

O que se testa, e por que ordem

PosiçãoVariávelPorquê primeiro
1O ganchoDecide a visualização aos três segundos
2O argumentoDecide a visualização completa
3O apelo à açãoDecide o clique

O que torna um teste legível

Uma só variável de cada vez, um orçamento idêntico de cada lado, e uma duração de difusão igual. Sem estas três condições, o resultado não se atribui a nada.

O que se guarda de cada teste

O ficheiro vencedor, a variante perdedora e a razão escrita numa linha. Sem essa nota, o mesmo erro repete-se três meses depois.

O erro que mais custa

Três formas do mesmo erro.

Mudar duas coisas ao mesmo tempo, o vídeo e o público, o que torna o resultado indecifrável.

Parar uma variante antes do seu limiar de investimento, julgando ler uma tendência.

E concluir de um teste de uma semana que o ângulo é mau, quando simplesmente apanhou uma má semana.

Uma última referência, válida num mercado instável: quando duvidar do dado, aumente o tamanho do teste antes de aumentar o número de testes. Uma medição fiável sobre três variantes vale mais do que dez medições incertas.