Hacer una prueba A/B de una campaña

Una prueba A/B envía de dos a cinco versiones de una campaña a un grupo de prueba, espera y después envía la versión con mejores resultados al resto de los destinatarios. Prueba asuntos, textos de vista previa, el nombre del remitente o todo el contenido, y elige la ganadora según la tasa de apertura, la tasa de clics, los pedidos o los ingresos.

Cómo se desarrolla una prueba

1. Cuando se envía la campaña, Emailit toma el grupo de prueba, una parte de los destinatarios elegida al azar, y lo reparte a partes iguales entre las versiones.
2. La campaña aparece como Testing mientras Emailit espera el tiempo que hayas definido.
3. Cuando se cumple el plazo, Emailit ordena las versiones según la métrica de la ganadora y envía la versión que va en cabeza a todos los que no están en el grupo de prueba. La campaña pasa entonces a Sent.

Con un grupo de prueba del 100 %, todos los destinatarios reciben una de las versiones y no hay fase de envío de la ganadora.

Configurar una prueba

1. Abre el paso de la prueba A/B. En el asistente de la campaña, ve a A/B test y activa Test versions of this email.

2. Elige cómo se decide la ganadora.

   Opción	Ordena las versiones por
   Open rate	Aperturas únicas por destinatario.
   Click rate	Clics únicos por destinatario.
   Orders per recipient	Pedidos atribuidos a cada versión, por destinatario.
   Revenue per recipient	Ingresos de los pedidos atribuidos a cada versión, por destinatario.

   Orders per recipient y Revenue per recipient usan Comercio electrónico, que está en alfa: solo el equipo de Emailit puede elegirlas. Una campaña que ya usa una de ellas la conserva.

3. Define el grupo de prueba y la espera. Test group (% of audience) va de 10 a 100 (por defecto, 20). Wait before picking (hours) va de 1 a 168 (por defecto, 4). Los pedidos tardan más que los clics, así que da un día o más a las pruebas por pedidos o por ingresos.

4. Edita las versiones. Cada versión tiene su propio Subject, Preview text y From name. Deja un campo vacío para usar el valor de la campaña. Selecciona Use different content para dar a una versión su propio contenido; si no, usa el contenido de la campaña. Add version añade versiones, hasta cinco.

5. Envía. Las pruebas A/B se envían todas a la vez, ahora o a una hora programada. Las demás estrategias de envío no están disponibles para ellas.

Leer los resultados

El informe de la campaña muestra una tarjeta A/B test con Sent, Loaded, Clicked, Orders y Revenue de cada versión (los pedidos y los ingresos, solo para el equipo de Emailit mientras Comercio electrónico está en alfa), y un trofeo junto a la ganadora. Su etiqueta indica la fiabilidad del resultado, según la probabilidad de que la versión que va en cabeza supere de verdad a la segunda:

En las pruebas por ingresos, la fiabilidad se calcula sobre los pedidos. La métrica de la ganadora y el porcentaje aparecen junto a la etiqueta.

Terminar una prueba antes de tiempo

Mientras la campaña está en Testing, selecciona Send this one en cualquier versión para enviarla al momento al resto de los destinatarios. Así termina la prueba.

Si todas las versiones obtienen el mismo resultado, por ejemplo porque todavía no se ha atribuido ningún pedido, gana la primera versión.

Usar la API

Pasa ab_test cuando crees o actualices un borrador:

{
  "ab_test": {
    "enabled": true,
    "winner_metric": "clicked",
    "test_size_percent": 20,
    "duration_hours": 6,
    "variants": [
      { "name": "A", "subject": "Our autumn collection is here" },
      { "name": "B", "subject": "{{first_name|\"Hey\"}}, new arrivals picked for you" }
    ]
  }
}

variants admite de dos a cinco versiones. Cada una puede definir subject, preview_text, from_name, from_email, html y text. Envía { "enabled": false } para desactivar la prueba. Obtener las estadísticas de una campaña devuelve los resultados de cada versión en ab_test.

Ver también