Um E-Commerce-E-Mail-Kampagnen richtig per A/B-Test zu prüfen: Testen Sie jeweils eine große Sache auf einmal, teilen Sie Ihre Liste zufällig 50/50 auf, küren Sie den Sieger nach Klicks oder Umsatz statt nach Öffnungen und – das ist der Teil, den fast jeder überspringt – wiederholen Sie das Siegerergebnis bei einem zweiten Versand, bevor Sie ihm glauben. Bei einer typischen Shop-Liste von 5.000–20.000 Personen erzeugen kleine Feinheiten wie Button-Farbe oder Ausrufezeichen Unterschiede, die statistisch nicht von Münzwürfen zu unterscheiden sind. Testen Sie stattdessen bedeutsame Kontraste: eine nutzenorientierte Betreffzeile gegen eine neugierorientierte, ein hervorgehobenes Produkt gegen ein Produktraster, eine Nur-Text-Optik gegen eine gestaltete Vorlage. So gemacht, baut ein Shop, der zwei oder drei ehrliche Tests im Monat fährt, ein sich verstärkendes Bild davon auf, worauf seine Liste reagiert. Auf die übliche Art gemacht, sammeln Sie Rauschen und nennen es Lernen.
Was Shop-Betreiber falsch machen, bevor der Test überhaupt beginnt
Die Fehler passieren meist in der Einrichtungsphase, nicht in der Analysephase.
Belanglosigkeiten testen. Emoji in der Betreffzeile oder nicht. „Jetzt shoppen“ gegen „Kollektion durchstöbern“. Diese können auf der Skala von Newsletter-Giganten eine Rolle spielen. Auf Ihrer Liste ist der Unterschied zu klein, als dass die Stichprobe ihn erkennen könnte, also hat die „gewinnende“ Variante dieses Mal aus Glück gewonnen. Beim nächsten Versand kehrt sich das Glück um, und schon haben Sie zwei widersprüchliche Erkenntnisse in Ihren Notizen.
Fünf Dinge auf einmal testen. Andere Betreffzeile, anderes Hero-Bild, anderes Angebot, andere Versandzeit. Variante B gewinnt – wegen was? Sie können es nicht wissen, also können Sie die Lektion nicht wiederverwenden, und wiederverwendbare Lektionen sind der ganze Sinn.
Nach einem Versand entscheiden. Ein Ergebnis, das einmal auftaucht, ist eine Anekdote. Ein Ergebnis, das zweimal bei verschiedenen Versänden auftaucht, ist ein Muster, um das Sie Kampagnen bauen können. Die wertvollste Einzelgewohnheit beim E-Mail-Testen ist die Wiederholung.
Nach Öffnungen urteilen. Seit Apple mit iOS 15 (2021) Mail Privacy Protection eingeführt hat, lädt Apple Mail Tracking-Pixel vorab und registriert „Öffnungen“, die kein Mensch gemacht hat. Ein Betreffzeilentest, der nach Öffnungen bewertet wird, wird teilweise auf Apples Servern bewertet. Öffnungen können für Betreffzeilen immer noch ein grobes Richtungssignal sein, aber wenn ein Klick- oder Umsatzvergleich verfügbar ist, nutzen Sie ihn.
Warum die Stichprobengröße entscheidet, was Sie testen dürfen
Sie brauchen die Formel nicht, nur ihre Konsequenz: Je kleiner Ihre Liste, desto größer muss der Unterschied sein, den Sie zuverlässig erkennen können.
Grob gesagt: Mit ein paar Tausend Empfängern pro Variante können Sie Unterschiede von mehreren Prozentpunkten in der Klickrate vertrauen. Einer Lücke von 0,3 Punkten können Sie nicht trauen – die liegt im Bereich, den der Zufall von sich aus erzeugt. (Beispielhafte Schwellen; wenn Sie Präzision wollen, nimmt jeder kostenlose Online-A/B-Signifikanzrechner Ihre Zahlen und sagt Ihnen, ob eine Lücke glaubhaft ist.)
Die praktischen Konsequenzen:
- Unter ca. 2.000 Empfängern pro Variante: Testen Sie nur große, strukturelle Kontraste – Angebots-Framing, E-Mail-Konzept, Inhaltstyp. Ignorieren Sie Mikro-Copy-Tests komplett.
- 2.000–10.000 pro Variante: Betreffzeilen-Ansätze, Layout, hervorgehobene Produkte werden testbar.
- Größere Listen: Feinere Unterschiede beginnen erkennbar zu werden, obwohl große Kontraste Ihnen pro Test immer noch mehr beibringen.
Eine kleine Liste ist also ein Grund, kühnere Unterschiede zu testen – die ohnehin die nützlicheren Tests sind.
Was sich tatsächlich zu testen lohnt, in Prioritätsreihenfolge
- Das Angebot und sein Framing. „Kostenloser Versand ab 60 €“ gegen „10 % Rabatt“ gegen gar keinen Anreiz. Das bewegt den Umsatz stärker als alles andere, was Sie variieren können, und es ist auch der Punkt, an dem Testen Ihre Marge schützt – das Ziel ist nicht, das größte Bestechungsgeld zu finden, sondern das günstigste Framing, das konvertiert.
- Betreffzeilen-Ansatz – keine Wortlaut-Feinheiten, sondern Ansätze. Direkter Nutzen gegen Neugier gegen produktspezifisch. Bewerten Sie mit Klicks neben Öffnungen, aus dem oben genannten Apple-Grund.
- Ein Produkt gegen viele. Ein Einzelprodukt-Feature gegen ein Raster. Shops sind oft überrascht, wie das für ihr Publikum ausgeht, und die Antwort prägt jede künftige Kampagne. Sie fließt auch in wie Sie Produkte für eine Kampagne auswählen überhaupt ein.
- Lang gegen kurz. Eine E-Mail, die verkauft, gegen eine E-Mail, die verlinkt.
- Versandzeit und -tag. Testbar, aber jagen Sie das zuletzt – eine mittelmäßige E-Mail zur perfekten Stunde ist immer noch mittelmäßig.
Sechs Monate diszipliniertes Testen mit zwei Tests im Monat gibt Ihnen ein Dutzend echte Antworten über Ihre spezifische Liste. Das ist ein Shop-Vermögenswert. Er verstärkt sich – und er überträgt sich, denn ein Betreffzeilen-Ansatz, der in Kampagnen gewinnt, ist es wert, auch in Ihren Automatisierungen ausprobiert zu werden.
So führen Sie einen Test durch, von Anfang bis Ende
- Schreiben Sie zuerst die Frage auf. „Schlägt eine Neugier-Betreffzeile eine direkte Nutzen-Betreffzeile für unsere Liste?“ Wenn Sie die Frage nicht formulieren können, testen Sie nicht, sondern basteln.
- Ändern Sie genau eine Sache. Alles andere identisch, einschließlich der Versandzeit.
- Teilen Sie 50/50, zufällig. Ihre Plattform erledigt die Zufälligkeit. Widerstehen Sie dem Drang, Variante B an „weniger wichtige“ Kontakte zu senden – das verzerrt den Test.
- Wählen Sie die Bewertungskennzahl vor dem Versand. Klickrate für Inhalts- und Betreffzeilentests; klick-zugeordneter Umsatz für Angebotstests. Stellen Sie sicher, dass die Umsatzzahl ehrlich gezählt wird – Kampagnenumsatz messen, ohne doppelt zu zählen behandelt die Zuordnungseinstellungen, die die Anzeigetafel wahrheitsgetreu halten.
- Warten Sie mindestens 24 Stunden, bevor Sie die Ergebnisse lesen. Frühe Zahlen übergewichten Ihre engagiertesten Öffner.
- Protokollieren Sie das Ergebnis in einer schlichten Tabelle: Datum, Frage, Varianten, Größen, Kennzahl, Lücke, Urteil. Zehn Minuten im Monat, und es hält Sie davon ab, geklärte Fragen erneut zu testen.
- Wiederholen Sie den Sieger bei einem ähnlichen künftigen Versand, bevor Sie ihn zum Hausstil erheben.
Ein Wort zur automatisierten „Sieger-Versand“-Funktion, die viele Plattformen anbieten – zwei Varianten an ein kleines Segment senden, den Sieger automatisch an den Rest. Praktisch, aber prüfen Sie zwei Einstellungen, bevor Sie ihr vertrauen: nach welcher Kennzahl der Sieger gewählt wird und wie lange die Testphase läuft. Ein Sieger, der zwei Stunden nach dem Start nach der Öffnungsrate gewählt wird, ist nach der schwächsten Kennzahl während des am wenigsten repräsentativen Zeitfensters gewählt. Wenn Sie die Funktion nutzen, stellen Sie die Siegerkennzahl auf Klicks, wo die Plattform es zulässt, und geben Sie der Testphase den größeren Teil eines Tages.
Wo die Grenze dieses Artikels liegt
Testen sagt Ihnen, welche Variante einer E-Mail besser abschneidet. Wenn Ihre Klickraten über alle Varianten hinweg niedrig sind, liegt die Lösung meist nicht in mehr Testen – sondern in besserer Zielgruppenansprache und Struktur, behandelt in Klickrate verbessern, ohne mehr E-Mails zu schreiben. Und wenn Sie sich zu einer Entscheidung über die Versandfrequenz durchtesten, ist das eine eigene Frage mit eigenen Abwägungen: Wie oft sollte ein Onlineshop Marketing-E-Mails versenden. Dieser Artikel ist die Methode; jene sind zwei der Stellen, auf die man sie richten kann.
Kennzahlen, die Ihnen sagen, dass sich das Testen auszahlt
- Trend der Klickrate über Kampagnen hinweg über ein Quartal – der Verstärkungseffekt angewandter Erkenntnisse.
- Umsatz pro Empfänger bei Ihren wiederkehrenden Kampagnentypen, vor und nach der Übernahme von Siegern.
- Anzahl der wiederholten (bestätigten) Erkenntnisse in Ihrem Protokoll. Fünf bestätigte schlagen zwanzig unbestätigte.
- Abmelderate – eine „gewinnende“ Variante, die Klicks gewinnt und dabei die Abmeldungen verdoppelt, ist ein Verlust mit einer Medaille um den Hals.
Tests in Omnisend durchführen
Ich führe meine Tests in Omnisend durch, weil meine Shops darauf laufen, und die Kampagnen-A/B-Einrichtung deckt ab, was dieser Artikel braucht: die Zielgruppe nach Betreffzeile oder Absender aufteilen oder eine Kampagne duplizieren, um Inhalt gegen Inhalt zu testen, dann pro Variante Klick- und Umsatzkennzahlen im Kampagnen-Report vergleichen. Die Segment-Tools machen die 50/50-Aufteilung außerdem trivial, wenn Sie lieber einen manuellen Test fahren als die eingebaute Funktion nutzen.
Ehrlich zu den Grenzen: Keine Plattform macht Ihre Stichprobe größer oder Ihre Testfrage klüger. Die Disziplin – eine Variable, Klicks vor Öffnungen, wiederholen vor Glauben – lebt in Ihrem Prozess, nicht in der Funktionsliste irgendeines Tools. Omnisend ist ein Affiliate-Partner von Shopimation; ich empfehle es aus täglicher Nutzung, nicht weil es die Statistik ändert.
Ihr nächster Schritt
Wählen Sie die eine Kampagne, die Sie am häufigsten senden, und schreiben Sie eine einzelne testbare Frage dazu auf – Angebots-Framing ist der wertvollste Anfangspunkt. Fahren Sie die 50/50-Aufteilung bei Ihrem nächsten Versand, bewerten Sie nach Klicks oder Umsatz und protokollieren Sie die Antwort. Eine bestätigte Erkenntnis im Monat sind zwölf im Jahr, und das ist mehr, als die meisten konkurrierenden Shops jemals über ihre eigenen Listen wissen werden.
