Pruebas A/B en correo en frío: qué probar primero

La mayoría de los equipos empiezan sus pruebas A/B de correo en frío por el asunto, porque es lo más fácil de cambiar y lo más fácil de imaginar que importa. También suele ser el peor punto de partida, porque el asunto solo decide si un mensaje se abre, y abrir no es el resultado por el que a nadie le pagan de verdad.

Por qué el asunto es la peor primera prueba

Una prueba de asunto mide un evento estrecho dentro de una cadena que todavía tiene que superar varios pasos más antes de producir una respuesta. Incluso una mejora real y estadísticamente sólida en la tasa de apertura puede no producir ninguna mejora medible en la tasa de respuesta si es el cuerpo del correo lo que realmente frena el rendimiento. Probar el asunto primero optimiza la variable con menos peso sobre la métrica que de verdad importa, y consume volumen de lista que podría haberse usado para probar algo con un techo mucho más alto.

Las variables que vale la pena probar antes del asunto

Cada una de estas variables está más cerca de la decisión real del prospecto que el asunto, por eso mueven la tasa de respuesta de forma más confiable una vez probadas correctamente.

Cómo correr una prueba válida al volumen del correo en frío

Las listas de correo en frío rara vez tienen el volumen que asumen las pruebas de marketing masivo. Probar cinco variables a la vez sobre una lista de 2.000 divide la muestra tan finamente que ningún resultado será estadísticamente significativo. Elige una sola variable, mantén todo lo demás constante, incluido el propio segmento de la lista, y corre cada variante con al menos unos cientos de envíos antes de sacar una conclusión. Mide el resultado principal como la tasa de respuesta a lo largo de toda la secuencia, no la tasa de apertura de un solo contacto, porque el seguimiento de aperturas es poco confiable y es la secuencia, no el mensaje aislado, la que realmente produce una respuesta.

Los errores más comunes al probar

El error más frecuente es cambiar más de una variable entre las dos versiones comparadas, lo que hace imposible saber qué cambio causó cualquier diferencia en el resultado. El segundo es cerrar una prueba con una muestra demasiado pequeña, a menudo después de solo unas decenas de envíos, lo que produce un resultado impulsado por el ruido y no por un efecto real. El tercero es probar sobre una lista mixta que abarca varios segmentos o perfiles, lo que puede esconder un efecto real en un segmento detrás de un resultado plano en otro. El cuarto es correr una prueba demasiado poco tiempo y perderse efectos que solo aparecen una vez que baja el pico del día de envío, con respuestas tardías llegando durante una o dos semanas más; no concluyas nada hasta que se cierre la ventana completa de respuesta de la secuencia.

Dónde encaja el asunto una vez resueltas las variables mayores

La prueba de asunto todavía tiene su lugar, simplemente más adelante en el proceso, una vez que la identidad del remitente, el enfoque de personalización y el tamaño de la llamada a la acción ya funcionan bien. En ese punto, una prueba de asunto refina un sistema que ya funciona en lugar de intentar compensar un cuerpo y una oferta que no convierten, y la mejora que produce es real y no un error de redondeo confundido con una señal.