A/B-Test für eine Kampagne durchführen

Ein A/B-Test sendet zwei bis fünf Versionen einer Kampagne an eine Testgruppe, wartet und sendet dann die Version mit dem besten Ergebnis an die übrigen Empfänger. Testen Sie Betreffzeilen, Vorschautext, den Absendernamen oder den gesamten Inhalt und wählen Sie die Gewinnerversion nach Öffnungsrate, Klickrate, Bestellungen oder Umsatz.

So läuft ein Test ab

1. Wenn die Kampagne gesendet wird, nimmt Emailit die Testgruppe, einen zufällig ausgewählten Anteil der Empfänger, und teilt sie gleichmäßig auf die Versionen auf.
2. Die Kampagne wird als Testing angezeigt, während Emailit die von Ihnen festgelegte Zeit abwartet.
3. Wenn die Zeit abgelaufen ist, ordnet Emailit die Versionen nach der Gewinnerkennzahl und sendet die führende Version an alle, die nicht in der Testgruppe sind. Die Kampagne ist dann Sent.

Bei einer Testgruppe von 100 % erhält jeder Empfänger eine der Versionen, und es gibt keine Gewinnerphase.

Test einrichten

1. Schritt A/B test öffnen. Wechseln Sie im Kampagnen-Assistenten zu A/B test und aktivieren Sie Test versions of this email.

2. Gewinnerkriterium wählen.

   Option	Ordnet die Versionen nach
   Open rate	Eindeutigen Öffnungen pro Empfänger.
   Click rate	Eindeutigen Klicks pro Empfänger.
   Orders per recipient	Zugeordneten Bestellungen jeder Version, pro Empfänger.
   Revenue per recipient	Umsatz der jeder Version zugeordneten Bestellungen, pro Empfänger.

   Orders per recipient und Revenue per recipient verwenden Commerce, das in der Alpha ist: Nur das Emailit-Team kann sie auswählen. Eine Kampagne, die bereits eine davon verwendet, behält sie.

3. Testgruppe und Wartezeit festlegen. Test group (% of audience) liegt zwischen 10 und 100 (Standardwert 20). Wait before picking (hours) liegt zwischen 1 und 168 (Standardwert 4). Bestellungen brauchen länger als Klicks, geben Sie Tests nach Bestellungen oder Umsatz daher einen Tag oder mehr.

4. Versionen bearbeiten. Jede Version hat eigene Felder Subject, Preview text und From name. Lassen Sie ein Feld leer, um den Wert der Kampagne zu verwenden. Wählen Sie Use different content, um einer Version eigenen E-Mail-Inhalt zu geben; andernfalls verwendet sie den Inhalt der Kampagne. Add version fügt weitere Versionen hinzu, bis zu fünf.

5. Senden. A/B-Tests senden alles auf einmal, sofort oder zu einem geplanten Zeitpunkt. Die anderen Versandstrategien sind für sie nicht verfügbar.

Ergebnisse lesen

Der Kampagnenbericht zeigt eine Karte A/B test mit Sent, Loaded, Clicked, Orders und Revenue jeder Version (Bestellungen und Umsatz nur für das Emailit-Team, solange Commerce in der Alpha ist) und einem Pokal neben der Gewinnerversion. Ihr Label zeigt, wie sicher das Ergebnis ist, gemessen an der Wahrscheinlichkeit, dass die führende Version die zweitplatzierte tatsächlich schlägt:

Bei Umsatztests wird die Konfidenz anhand der Bestellungen berechnet. Die Gewinnerkennzahl und der Prozentsatz stehen neben dem Label.

Test vorzeitig beenden

Solange die Kampagne Testing ist, wählen Sie bei einer beliebigen Version Send this one, um sie sofort an die übrigen Empfänger zu senden. Damit endet der Test.

Erzielen alle Versionen dasselbe Ergebnis, zum Beispiel weil noch keine Bestellungen zugeordnet wurden, gewinnt die erste Version.

Per API nutzen

Übergeben Sie ab_test, wenn Sie einen Entwurf erstellen oder aktualisieren:

{
  "ab_test": {
    "enabled": true,
    "winner_metric": "clicked",
    "test_size_percent": 20,
    "duration_hours": 6,
    "variants": [
      { "name": "A", "subject": "Our autumn collection is here" },
      { "name": "B", "subject": "{{first_name|\"Hey\"}}, new arrivals picked for you" }
    ]
  }
}

variants nimmt zwei bis fünf Versionen an. Jede kann subject, preview_text, from_name, from_email, html und text setzen. Senden Sie { "enabled": false }, um den Test zu deaktivieren. Kampagnenstatistiken abrufen gibt die Ergebnisse jeder Version in ab_test zurück.

Siehe auch