Um Automatisierungszweige per A/B-Test zu prüfen, fügen Sie an der Stelle, die Sie testen möchten, einen zufälligen Split in den Flow ein, schicken jeden Zweig durch eine andere Version des Schritts – eine andere Verzögerung, Botschaft, ein anderes Angebot oder einen anderen Kanal – und lassen den Flow unangetastet laufen, bis jeder Zweig genügend Empfänger gesammelt hat, um sie am Umsatz pro Empfänger zu vergleichen. Die Mechanik ist in zehn Minuten erledigt. Was nützliche Zweigtests von irreführenden unterscheidet, ist alles rund um die Mechanik: Flows sammeln Traffic langsam an, also laufen Tests wochenlang; wer einen laufenden Flow mitten im Test bearbeitet, verfälscht das Ergebnis; und ein Gewinner, der an der ersten E-Mail gemessen wurde, kann über die gesamte Sequenz hinweg heimlich verlieren. Dieser Leitfaden zeigt, wie sich Zweigtests von Kampagnentests unterscheiden und wie Sie einen durchführen, dem Sie wirklich vertrauen können.
Warum Flow-Tests keine Kampagnentests sind
Ein Kampagnentest ist ein Ausbruch: Sie versenden am Dienstag an 10.000 Menschen, und am Donnerstag haben Sie Ihre Stichprobe. Eine Automatisierung dagegen tröpfelt. Ein Warenkorbabbruch-Flow in einem mittelgroßen Shop wird vielleicht 20- oder 40-mal am Tag ausgelöst – das heißt, ein Zweigtest, der tausend Empfänger pro Seite braucht, füllt sich erst nach Wochen, manchmal nach ein paar Monaten.
Diese Langsamkeit ändert die Regeln. Ob Sie wollen oder nicht: Zeit wird zur Variablen. Ein Test, der sich über sechs Wochen erstreckt, erwischt Zahltage, Aktionen, vielleicht einen Saisonwechsel. Und weil der Flow weiterläuft, während Sie warten, ist die Versuchung ständig da, herumzubasteln. Kampagnendisziplin sagt: „Wähle eine Kennzahl und schau nicht zu früh nach.“ Flow-Disziplin fügt zwei weitere Gebote hinzu: Fass den Flow während des Tests nicht an, und miss die gesamte Sequenz, nicht nur den Schritt, den du geändert hast.
Falls Sie die Disziplin des Einzelvariablen-Tests noch nicht verinnerlicht haben, beginnen Sie mit wie man immer nur eine Variable auf einmal testet – alles dort gilt auch hier, nur mit heruntergedrehtem Lautstärkeregler und aufgedrehtem Geduldsregler.
Der stille Preis dafür, seine Flows nie zu testen
Automatisierungen sind die am häufigsten einmal getesteten, am seltensten je wieder getesteten Assets im E-Commerce. Ein Händler feilt wöchentlich an Kampagnen-Betreffzeilen, während der Warenkorbabbruch-Flow – oft die Sequenz mit dem höchsten Umsatz pro Empfänger im ganzen Konto – auf Einstellungen läuft, die vor zwei Jahren an einem einzigen Nachmittag festgelegt wurden.
Das ist verkehrt herum, und die Rechnung zeigt, warum. Eine Kampagnenverbesserung zahlt sich einmal aus. Eine Flow-Verbesserung zahlt sich bei jeder Auslösung aus, für immer. Heben Sie den Umsatz pro Empfänger eines Warenkorb-Flows von 1,50 € auf 1,70 € in einem Shop, in den monatlich 800 Menschen eintreten, und Sie haben rund 160 € im Monat hinzugewonnen – etwa 1.900 € im Jahr – aus einem einzigen Test, den Sie einmal durchgeführt haben. (Beispielhafte Zahlen.) Das Leck ist kein kaputter Flow, sondern ein nie hinterfragter.
Was in einem Zweig tatsächlich einen Test wert ist
Nicht jeder Schritt verdient einen Test. Die Kandidaten, die tendenziell Geld bewegen, ungefähr in dieser Reihenfolge:
- Verzögerungen. Die Lücke zwischen Auslöser und erster Nachricht oder zwischen Nachrichten. Das Timing im Warenkorb-Flow ist der Klassiker und hat einen eigenen Leitfaden: Warenkorbabbruch-Timing per A/B-Test.
- Angebote. Rabatt oder kein Rabatt in einer Flow-Nachricht, oder mit welchem Anreiz die Willkommensserie eröffnet – eine Entscheidung, die groß genug ist, dass wie man Angebote im Willkommens-Flow per A/B-Test prüft sie gesondert behandelt.
- Sequenzlänge. Drei Nachrichten gegen zwei. Ein Zweigtest ist der ehrliche Weg, um herauszufinden, ob die dritte E-Mail Bestellungen bringt oder nur Abmeldungen.
- Kanal. E-Mail gegen SMS für einen bestimmten Touchpoint – mechanisch ein Zweigtest, aber mit Kosten- und Einwilligungsfeinheiten, die in E-Mail vs. SMS bei der Nachfassaktion per A/B-Test behandelt werden.
- Nachrichteninhalt. Betreff, Layout, hervorgehobene Produkte – lohnenswert, aber Inhalte bewegen den Flow-Umsatz meist weniger als Timing und Angebote, also testen Sie sie nach den strukturellen Fragen.
Ein Test pro Flow zur gleichen Zeit. Zwei gestapelte Splits in einem Flow bedeuten vier Kombinationen und einen Stichprobenbedarf, den Ihr Auslösevolumen nicht füttern kann.
Den Split einrichten, Schritt für Schritt
- Wählen Sie den Schritt und formulieren Sie die Frage. „Schlägt eine 2-Stunden-Erstverzögerung 30 Minuten beim Umsatz pro Empfänger?“ Ein Satz, eine Variable, eine Kennzahl.
- Platzieren Sie den Split am Entscheidungspunkt – ein zufälliger 50/50-Zweig, so positioniert, dass alles oberhalb davon für beide Arme identisch ist.
- Bauen Sie beide Zweige vollständig auf. Wenn Sie die erste Verzögerung testen, sollte alles danach in beiden Armen gleich sein. Wenn Sie die Sequenzlänge testen, divergieren die Arme, und genau diese Divergenz ist die Variable.
- Schätzen Sie die Laufzeit vor dem Start. Tägliches Auslösevolumen × Tage = Empfänger pro Zweig. Wenn täglich 30 Menschen in den Flow eintreten, dauern tausend pro Seite rund zehn Wochen. Das im Voraus zu wissen verhindert die Kapitulation am neunten Tag nach dem Motto „nennen wir es einfach entschieden“.
- Frieren Sie den Flow ein. Keine Textänderungen, keine neuen Schritte, keine „kleinen Korrekturen“, solange der Test läuft. Eine Bearbeitung mittendrin bedeutet, dass frühe und späte Empfänger unterschiedliche Flows erlebt haben – und Ihre zwei Zweige sind nicht mehr der einzige Unterschied. Wenn Sie einen echten Fehler finden, beheben Sie ihn, notieren das Datum und starten die Uhr neu.
- Protokollieren Sie das Ergebnis – Sieg, Niederlage oder Unentschieden – irgendwo, wo Sie es nächstes Jahr wiederfinden. Eine datierte einzeilige Notiz pro Test genügt, damit Sie den Verlierer vom letzten Jahr nicht erneut durchspielen.
Messen Sie den ganzen Zweig, nicht den Schritt
Das ist der Fehler, der speziell beim Flow-Testen auftritt, deshalb bekommt er einen eigenen Abschnitt.
Angenommen, Sie testen eine aggressive erste Warenkorb-E-Mail gegen eine sanfte. Die aggressive Version gewinnt bei den Bestellungen aus E-Mail eins. Fall erledigt? Noch nicht – die Menschen, die die aggressive E-Mail nicht konvertiert hat, kommen vielleicht genervt bei E-Mail zwei und drei an oder haben sich schon abgemeldet, sodass der sanfte Zweig die Gesamtsequenz gewinnen kann, während er den Eröffnungsschritt verliert. Die Vergleichseinheit ist der Zweig, von Eintritt bis Austritt: Gesamtumsatz pro Person, die in den jeweiligen Arm eingetreten ist, plus die Abmelderate, die jeder Arm unterwegs erzeugt hat.
Beurteilen Sie Zweige nach Umsatz pro Empfänger und Abmeldungen pro Empfänger. Öffnungen und Klicks bei einzelnen Schritten sind Diagnosewerte, nützlich, um zu erklären, warum ein Zweig gewonnen hat – niemals das Urteil.
Ein Shop-Beispiel (beispielhaft)
Ein Shop, der Kaffeeausrüstung verkauft, testet die erste Verzögerung seines Warenkorb-Flows: 30 Minuten gegen 4 Stunden, 50/50 gesplittet, alles danach identisch. Das Auslösevolumen liegt bei etwa 25 Warenkörben am Tag, also plant der Inhaber acht Wochen ein und markiert das Enddatum in einem Kalender. Er notiert außerdem, dass Woche sechs eine geplante shopweite Aktion enthält – der Traffic durch den Flow wird hochschnellen und beide Zweige gleichermaßen verzerren, was die zufällige Zuteilung auffängt, also übersteht der Test das. Am Ende: Der 4-Stunden-Zweig zeigt etwas weniger Bestellungen aus E-Mail eins, aber höheren Zweig-Gesamtumsatz pro Empfänger und weniger Abmeldungen. Er stellt auf 4 Stunden um, protokolliert das Ergebnis und reiht den nächsten Test ein – zwei Nachrichten gegen drei. (Beispielhaftes Beispiel.)
Wo Omnisend ins Spiel kommt
Ich führe diese Tests in Omnisend durch, weil meine Shops darauf laufen, und sein Automatisierungseditor beherrscht die zwei Dinge, die Zweigtests wirklich brauchen: einen Split-Schritt, den man überall in einem Flow platzieren kann, um zufällig festzulegen, wer welchen Pfad nimmt, und eine Leistungsberichterstattung pro Pfad, damit man Zweige am Umsatz vergleichen kann, statt Klickprotokolle in eine Tabelle zu exportieren. E-Mail- und SMS-Schritte leben im selben Editor, was Kanal-Zweigtests in einem Flow hält. Omnisend ist ein Affiliate-Partner von Shopimation; die Empfehlung stammt aus dem täglichen Gebrauch, und der ehrliche Vorbehalt ist, dass kein Tool die Geduld liefert – ein in zehn Minuten konfigurierter Split-Schritt braucht trotzdem seine acht stillen Wochen.
Ihr nächster Schritt
Öffnen Sie Ihre umsatzstärkste Automatisierung und prüfen Sie, wann ihre Verzögerungen und Angebote zuletzt geändert wurden. Wenn die Antwort „bei der Einrichtung“ lautet, wählen Sie eine strukturelle Frage – die erste Verzögerung ist meist der beste Eröffnungszug –, schätzen Sie die Laufzeit anhand Ihres Auslösevolumens und starten Sie den Split noch diese Woche. Wenn das Ergebnis vorliegt, lassen Sie es nicht in einem Dashboard versauern: wie man Testergebnisse in dauerhafte Automatisierungsverbesserungen verwandelt behandelt, wie der Erfolg von Dauer bleibt.
