Una marca enfrenta dos vídeos de creador. Uno obtiene mejor coste por resultado, se declara el ganador, y el siguiente trimestre de contenido se construye sobre esa conclusión.

En un mercado de este tamaño esa conclusión suele estar inventada. No exactamente equivocada, simplemente sin respaldo, y una decisión tomada sobre datos sin respaldo se siente exactamente igual que una tomada sobre datos reales.

Qué necesita de verdad un test comparativo

Un test comparativo compara conversiones, no visualizaciones. Para distinguir una diferencia real de una casualidad hacen falta muchas conversiones en cada variante, y muchas quiere decir cientos y no decenas.

La mayoría de campañas portuguesas no producen eso en quince días. Producen lo suficiente para ver una diferencia, que no es lo mismo que lo suficiente para fiarse de ella. Dos vídeos que parecen separados un veinte por ciento con cuarenta conversiones cada uno intercambiarán posiciones a menudo si se dejan otra semana.

No es motivo para dejar de testar. Es motivo para dejar de decidir con eso como si estuviera zanjado.

Tres medidas que funcionan con poco volumen

La pregunta que deja de hacerse

Todo negocio tiene una pregunta que responde una y otra vez: si cabe, cuánto tarda, si es difícil de instalar, si se entrega aquí.

Si un vídeo hace su trabajo, esa pregunta aparece menos en los mensajes, y eso se mide sin ninguna herramienta. Cuenta las consultas que la contienen un mes antes y un mes después. Una caída es una señal real, porque no depende del volumen, depende de que llegue menos la misma pregunta.

La tasa de respuesta en los envíos

Si el equipo comercial mete un vídeo en un primer correo, sabrá en dos semanas si responde más gente. Es una muestra pequeña y es una comparación de la misma lista, el mismo remitente y la misma oferta, lo que la hace mucho más limpia que un test publicitario.

Que alguien lo reutilice

La señal más infravalorada del oficio. Un contenido que recogen los comerciales, un distribuidor, un socio minorista o un empleado que lo publica por su cuenta es un contenido que resolvió un problema que alguien tenía.

Nadie reenvía un vídeo que le parece mediocre. La reutilización es un juicio de gente que se juega algo, y observarla no cuesta nada.

Qué se puede medir¿Funciona con poco volumen?Qué te dice
Coste por resultado entre dos vídeosRara vezRuido casi siempre, algo real a veces
Tiempo de visionado y finalizaciónSi la apertura funciona
La pregunta que desaparece de las consultasSi respondió a algo
Tasa de respuesta en la misma lista de correoSi se gana la atención
Reutilización interna por ventas o sociosSi es de verdad útil
Crecimiento de seguidoresNoCasi nada sobre vender

La última fila merece decirse claro. El número de seguidores es la cifra más fácil de ver y la menos conectada con que se haya vendido algo, y es la que más veces acaba en un informe porque se mueve.

Qué no comparar

No compares una campaña portuguesa con la misma campaña en un mercado mayor. Un país cinco veces menor siempre parecerá peor en cifras absolutas, y esa comparación ha matado más buen contenido local que ninguna decisión creativa.

No compares un vídeo hecho para una cuenta publicitaria con uno hecho para una ficha de producto. Tenían trabajos distintos y solo uno iba a producir un coste por resultado.

Y no compares este mes con el mismo mes del año pasado salvo que no haya cambiado nada más, cosa que nunca es cierta. Compara el mismo contenido en el mismo sitio a lo largo de una ventana más larga, y asume que aquí esa ventana tiene que ser más larga de lo que sugieren los paneles.

La versión honesta de un informe

Para casi todas las marcas de este mercado, un informe mensual útil tiene cuatro líneas y ningún gráfico.

Qué publicamos. Qué nos devolvieron, incluido lo que dice ventas. Qué repetiríamos. Qué paramos. Con eso basta para dirigirse, y es más veraz que una página de porcentajes calculados sobre muestras demasiado pequeñas para sostenerlos.

Los equipos que mejoran más rápido no son los que mejor miden. Son los que escriben qué esperaban antes de publicar, y lo comparan después con lo que pasó.