El test A/B es el método científico de la publicidad: se comparan dos versiones de un mismo elemento para saber cuál funciona mejor. Es un clásico de las asignaturas de marketing digital y suele aplicarse mal. Esta guía ofrece un procedimiento riguroso con ejemplos numéricos.
El principio
Se expone a dos grupos comparables a dos variantes distintas, cambiando un solo elemento cada vez, y después se compara una métrica elegida de antemano. Si la única diferencia entre A y B es la imagen, la diferencia de resultados puede atribuirse razonablemente a ella.
Lo que se puede probar:
- la creatividad: imagen, vídeo, gancho, plano inicial;
- el texto: titular, argumento, tono;
- el botón de llamada a la acción;
- la audiencia;
- la ubicación o el formato;
- la página de destino.
Paso 1: formular una hipótesis
Un test serio empieza con una frase del tipo: «Si cambio X, entonces Y debería variar, porque Z».
Ejemplo. «Si sustituyo la imagen del producto por un vídeo de 10 segundos, el CTR debería aumentar, porque el movimiento capta más atención en el feed».
Sin hipótesis no se sabe qué se busca y se corre el riesgo de sacar conclusiones del azar.
Paso 2: elegir una sola variable
Probar dos anuncios que difieren a la vez en imagen, texto y audiencia no permite concluir nada: es imposible saber qué produjo la diferencia. Una variable cada vez. Para probar varios elementos, se encadenan los tests: primero la imagen, luego el texto, después el botón.
Paso 3: elegir la métrica de éxito
Elige la métrica antes de lanzar, de forma coherente con el objetivo:
| Qué pruebas | Métrica adecuada |
|---|---|
| Creatividad (atención) | CTR, tasa de reproducción |
| Audiencia | Coste por resultado |
| Página de destino | Tasa de conversión |
| Oferta | CPA, ROAS |
Elegir la métrica a posteriori, entre las que dan la razón a la variante preferida, es un sesgo clásico. Consulta Fórmulas del marketing digital.
Paso 4: repartir con equidad presupuesto y audiencia
Ambas variantes deben recibir un presupuesto comparable y mostrarse a audiencias comparables, durante el mismo periodo. Meta y TikTok ofrecen herramientas de test que separan las audiencias para que una misma persona no vea las dos versiones. Consulta Probar con un test A/B y Tests divididos de TikTok.
Paso 5: dejar que el test dure
Detener un test en cuanto una variante toma ventaja es el error más frecuente. Los primeros días son inestables, sobre todo por la fase de aprendizaje (Optimizar sin romper el aprendizaje). Referencias:
- dejar correr varios días, idealmente al menos una semana completa para suavizar las variaciones entre días laborables y fin de semana;
- buscar un número suficiente de resultados por variante;
- no modificar las variantes durante el test.
Paso 6: leer el resultado con prudencia
Una diferencia observada no es necesariamente una diferencia real: el azar produce diferencias.
Ejemplo numérico. Dos imágenes se muestran 10.000 veces cada una.
| Impresiones | Clics | CTR | |
|---|---|---|---|
| Variante A | 10.000 | 100 | 1,0 % |
| Variante B | 10.000 | 130 | 1,3 % |
B parece un 30 % mejor. Una prueba estadística clásica de comparación de dos proporciones da aquí una probabilidad de alrededor del 5 % de observar esa diferencia por puro azar: estás en el límite de lo que suele considerarse significativo. Una conclusión razonable: B es probablemente mejor, pero sería prudente prolongar el test antes de generalizar.
Si los mismos porcentajes se hubieran obtenido con 1.000 impresiones y 10 frente a 13 clics, la conclusión sería nula: tres clics de diferencia son azar. Cuanto menor es la muestra, menos fiable es la diferencia.
Las plataformas suelen mostrar un nivel de confianza o una probabilidad de victoria; úsalos como ayuda, no como certeza.
Paso 7: documentar y encadenar
Anota en cada test la hipótesis, la variable, la duración, los resultados y la decisión. Estas notas evitan repetir los mismos errores. Un test ganador se convierte en la nueva referencia, que el siguiente test intenta superar.
Los ocho errores clásicos
- Probar varias variables a la vez.
- Parar demasiado pronto.
- Comparar periodos o presupuestos distintos.
- Elegir la métrica después de ver los resultados.
- Concluir con muy pocos datos.
- Modificar una variante durante el test.
- Generalizar un resultado a otro producto, otra audiencia u otra temporada sin comprobarlo de nuevo.
- Olvidar que la versión con más clics no siempre es la más rentable: sigue también la conversión.
Preguntas frecuentes
¿Cuánto tiempo debe durar un test A/B publicitario? Varios días, idealmente una semana completa, y hasta que cada variante tenga suficientes resultados.
¿Se pueden probar más de dos variantes? Sí (test A/B/C), pero cada variante adicional diluye el presupuesto y exige más datos.
¿Qué diferencia hay entre un test A/B y la optimización automática? El test A/B es un protocolo que tú controlas; la optimización automática reparte la entrega de forma continua según el rendimiento, sin un protocolo comparable.
¿Enseñas publicidad online? Solicita acceso.