Contenido
Las pruebas A/B, también llamadas pruebas divididas, permiten comparar distintas versiones de un mismo email para evaluar cómo los cambios en su contenido, asunto o momento de envío afectan a las tasas de apertura, clics y conversión. A partir de los resultados, se puede elegir la mejor variante y enviarla al resto de la audiencia. También permiten comprobar hipótesis y planificar futuros envíos masivos.
¿Cómo realizar pruebas A/B?
En la sección «Envíos masivos», haga clic en A/B Test de Email.
Paso 1. A quién enviar
Seleccione en la lista los segmentos adecuados.
Para excluir clientes del envío masivo:
- Abra «Configuraciones avanzadas».
- Haga clic en Excluir.
- Seleccione en la lista los segmentos que se deben excluir.
Paso 2. Qué probar
Seleccione el parámetro que se utilizará en la prueba. Hay cuatro parámetros disponibles:
- Tema y preencabezado del correo. Permite determinar qué tema funciona mejor: con o sin personalización, largo o corto, con o sin un signo de interrogación al final. También permite comparar el texto del preencabezado y comprobar la eficacia de una llamada a la acción.
- De quién. Permite analizar la reacción de los destinatarios ante diferentes direcciones de remitente, por ejemplo, una dirección de la tienda frente a la dirección del gestor del cliente.
- Email. Permite comparar la eficacia de distintos contenidos y estilos de diseño.
- Hora de envío. Permite determinar el momento más adecuado para enviar los emails o el envío masivo.
El criterio para determinar la variante ganadora es el indicador utilizado para seleccionar la mejor variante. Los criterios disponibles dependen del parámetro de prueba seleccionado:
- Más aperturas del correo.
- Más clics en el enlace del correo.
- Mayor porcentaje de clics respecto al número de visualizaciones del correo.
- Mayor número de pedidos.
- Mayor importe total de los pedidos.
- Selección manual después de enviar las variantes de prueba. En este caso, la variante ganadora se elige a partir de los indicadores de cada envío de prueba y se envía al resto de los clientes del segmento.
La casilla Grupo de control está disponible cuando se selecciona uno de estos criterios: «Mayor número de pedidos», «Mayor importe total de los pedidos» o «Selección manual de la variante ganadora».
A continuación, seleccione el número de variantes. Se pueden probar simultáneamente hasta tres variantes de email.
Pruebas con un grupo de control
Los participantes se dividen en varios grupos. El grupo de control está formado por clientes que no reciben el envío masivo. La eficacia de cada variante se compara con los resultados del grupo de control. Esto permite medir el efecto neto del envío, ya que algunos clientes pueden realizar la acción objetivo aunque no lo reciban.
Pruebas sin un grupo de control
Los participantes se dividen en grupos y cada grupo recibe una variante diferente. Después se compara la eficacia de las variantes para elegir la mejor.
En «Clientes que recibirán las versiones de prueba por igual», indique el tamaño de los grupos de prueba.
El porcentaje especificado determina qué parte de los clientes del segmento recibirá las variantes de prueba, distribuidas por igual. Los clientes restantes recibirán la variante ganadora. Si se especifica el 100 %, no se enviará posteriormente una variante ganadora: todos los clientes se distribuirán entre los grupos de prueba.
El sistema calcula automáticamente el número de clientes que deben participar para obtener un resultado fiable. Para calcular este parámetro manualmente, haga clic en ¿Cómo determinar la fiabilidad?, en la esquina inferior derecha del bloque.
La calculadora contiene los siguientes valores:
- Valor medio. Se calcula a partir de los datos históricos del sistema, como el promedio de los últimos seis meses.
- Incremento esperado. Es el porcentaje mínimo de mejora previsto como resultado de la prueba. Cuanto menor sea el incremento esperado, mayor será la muestra necesaria. Si el resultado no alcanza este incremento, la diferencia se considera no significativa.
- Fiabilidad. Es la probabilidad de que el resultado sea correcto cuando la prueba muestra una diferencia. Si no se conoce el porcentaje adecuado, se puede conservar el valor predeterminado.
- Potencia. Es la probabilidad de que el resultado sea correcto cuando la prueba no muestra una diferencia. Si no se conoce el porcentaje adecuado, se puede conservar el valor predeterminado.
- Muestra de prueba. Es el número de personas que deben ver cada variante para que los resultados sean fiables. El tamaño de la muestra ayuda a calcular correctamente la duración de la prueba y evita finalizarla antes de tiempo o prolongarla innecesariamente.
Paso 3. Email
La configuración de este bloque cambia según el parámetro seleccionado:
- Tema/preencabezado. Se pueden especificar temas y preencabezados diferentes para cada variante.
- De quién. Se pueden utilizar distintas direcciones de remitente para las variantes de prueba.
- Email. Se pueden crear variantes diferentes mediante el constructor o el editor visual.
- Hora de envío. El momento de envío de cada variante se configura en el bloque «Cuándo enviar».
La creación de plantillas se describe en el artículo sobre la configuración del email.
Paso 4. Cuándo enviar
Las variantes de prueba se pueden enviar inmediatamente o programar para una fecha y hora determinadas.
En este bloque también se configura el período tras el cual se enviará la variante ganadora. Esta opción está disponible cuando el criterio de selección no es manual y el tamaño de los grupos de prueba es inferior al 100 %.
Nota
Se recomienda establecer un período mínimo de 3 horas. Durante este intervalo, los destinatarios pueden abrir el correo o realizar otra acción objetivo que se utilizará para determinar la variante ganadora.
Cuando se prueban diferentes horas de envío, el momento de envío se configura por separado para cada variante.
Paso 5. Conversión
La configuración de la conversión para los envíos masivos de email se describe en el artículo sobre la conversión.
Analítica
Los resultados de la prueba A/B aparecen en un informe disponible después de enviar las variantes de prueba. Para abrirlo, seleccione el envío masivo correspondiente y haga clic en Analítica.
La analítica muestra las estadísticas de cada variante, los datos generales del envío, el mapa de clics y el embudo de ventas. Puede consultar más información en el artículo sobre la lista de envíos y sus estadísticas.
Estadísticas en el momento de elegir la variante ganadora
En la pestaña «Analítica de variantes A/B», las estadísticas de las variantes se actualizan en tiempo real. Después de enviar la variante ganadora, los valores pueden seguir cambiando si los destinatarios abren los emails o hacen clic en sus enlaces.
Al elegir la variante ganadora, el sistema guarda por separado los indicadores de cada variante en ese momento. Esta instantánea se crea tanto con la selección automática como con la manual y no cambia cuando se actualizan las estadísticas actuales.
Para consultar los valores guardados, haga clic en «Analítica en el momento de elegir la variante ganadora» en la fila de la variante ganadora. Debajo de la fila aparecerán los mismos indicadores que contiene la tabla principal, pero con los valores registrados en el momento de la selección. Las estadísticas actuales permanecerán en las filas principales.
Los indicadores guardados permiten comprobar con qué valores se eligió la variante ganadora, aunque las estadísticas cambien posteriormente. Con la selección automática, la instantánea contiene los datos utilizados por el sistema para determinar la ganadora; con la selección manual, contiene los valores existentes en el momento de la selección.
Nota
El botón aparece después de finalizar la prueba A/B si el tamaño de los grupos de prueba es inferior al 100 %, se ha seleccionado una variante ganadora y existe una instantánea de las estadísticas. Es posible que esta instantánea no esté disponible en pruebas finalizadas anteriormente.
Cuando se utiliza el criterio de selección manual, está disponible el botón A/B Elegir variante.