Das A/B-Testen von SMS funktioniert wie das Testen von E-Mails, mit zwei wichtigen Unterschieden: Ihre Stichprobe ist kleiner und jede Variante kostet Geld. Also ändert sich die Methode. Testen Sie jeweils eine Variable, küren Sie Sieger nach Umsatz pro Nachricht statt nach Klicks und – das ist der Teil, den die meisten Anleitungen überspringen – testen Sie nur Änderungen, die groß genug sind, um auf einer SMS-großen Liste erkennbar zu sein. Eine 2.000-Abonnenten-Liste, halbiert, kann eine Klickrate von 9 % nicht von einer von 10 % unterscheiden; das Rauschen überflutet das Signal. Was sie erkennen kann, ist Angebot gegen kein Angebot, morgens gegen abends, ein Segment gegen zwei. Testen Sie große Sprünge in Kampagnen, fahren Sie dauerhaft laufende Splits innerhalb Ihrer Automatisierungen, wo sich über Monate Stichproben ansammeln, und lassen Sie die Umsatzzahl – nicht die Klickzahl – den Sieger bestimmen.
Warum Ihre SMS-„Tests“ immer wieder Münzwurf-Antworten liefern
Das Muster, das ich sehe und dem ich selbst früh begegnet bin: Ein Shop teilt eine Kampagne, Variante A bekommt 41 Klicks, Variante B bekommt 48, B wird zum Sieger erklärt, und im nächsten Monat verliert der „gewinnende“ Stil. Nichts wurde gelernt; eine Münze wurde mit Zusatzschritten geworfen.
Die Grundursache ist die Stichprobengröße. E-Mail-Listen sind groß genug, dass moderate Unterschiede zuverlässig zutage treten. SMS-Listen sind typischerweise ein Fünftel so groß oder kleiner, weil die Opt-in-Hürde höher ist. Teilen Sie 1.800 Abonnenten in zwei Hälften, und bei einer Klickrate von 10 % vergleichen Sie rund 90 Klicks gegen 90. Ein Unterschied von sieben Klicks liegt deutlich innerhalb der Zufallsschwankung. Die Mathematik kümmert es nicht, wie überzeugt das grüne Häkchen des Dashboards aussieht.
Es gibt eine zweite SMS-spezifische Falle: Klicks sind ohnehin die falsche Anzeigetafel. Ein Text, der „70 % AUF ALLES“ schreit, wird eine maßvolle Nachricht jedes Mal überklicken und kann trotzdem bei Umsatz, Marge und Abmeldungen verlieren. Wären Klicks das Ziel, wären wir alle einen einzigen Ausverkaufsrabatt vom Reichtum entfernt. Die Lücke zwischen Klick und Verkauf ist eine eigene Diagnose für sich – warum Ihre SMS-Kampagne Klicks, aber keine Verkäufe bekommt –, aber für Testzwecke ist die Regel einfach: Die gewinnende Variante ist die, die pro gesendeter Nachricht mehr Geld eingebracht hat, abzüglich jeglichen Rabatts, den sie trug.
Warum das Kopieren von E-Mail-Testgewohnheiten hier scheitert
Die E-Mail-Testkultur ist auf günstige Versände und Betreffzeilen gebaut. Keins von beidem überträgt sich.
In SMS gibt es keine Betreffzeile. Die ganze Nachricht landet auf dem Sperrbildschirm, also testen Sie immer das gesamte Kreativ, nicht einen Teaser dafür. Und jede Variante, die Sie senden, wird abgerechnet – ein schlampiger Test einer verlierenden Variante hat eine echte Rechnung angehängt, was genau der Grund ist, warum die Kostenrechnung in die echten Kosten von SMS-Marketing berechnen neben Ihren Testplan gehört. Und eine Zwei-Segment-Variante, gegen eine Ein-Segment-Variante getestet, trägt ein Handicap: Die lange Version muss um genug übertreffen, um die doppelten Kosten pro Versand zu decken. Das ist eine Latte, die das E-Mail-Testen niemandem beizubringen lehrte.
Die Gewohnheit, die es zu behalten lohnt, aus E-Mail: die Disziplin, jeweils eine Sache auf einmal zu ändern. Ändern Sie Angebot, Versandzeit und Wortlaut auf einmal, und ein Sieg lehrt Sie nichts, das Sie wiederverwenden können.
Was Sie testen sollten, in Reihenfolge der erwarteten Wirkung
Arbeiten Sie sich diese Leiter hinunter. Testen Sie nicht Sprosse vier, während Sprosse eins unerforscht ist – die oberen Sprossen bewegen den Umsatz um ein Vielfaches, die unteren um Prozente.
- Angebot. Rabatt gegen kein Rabatt. Prozent gegen kostenlosen Versand. Code gegen kein Code. Das ist der größte Hebel und der mit Margenkonsequenzen, also lohnt es sich, ihn sorgfältig zu testen, statt anzunehmen.
- Timing. Morgens gegen abends, Wochentag und für Flows die Verzögerung nach dem Trigger. Timing-Sprünge sind meist groß genug, dass kleine Listen sie erkennen, und Ruhezeiten-Regeln schränken ein, was Sie überhaupt testen können.
- Länge und Struktur. Ein knappes Segment gegen eine vollere Zwei-Segment-Nachricht. Meine Erfahrung: Die kurze Version gewinnt öfter, als sie verliert, und kostet die Hälfte, selbst wenn sie gleichzieht – ein Gleichstand ist hier ein Sieg.
- Dringlichkeits-Framing. Echte Frist klar benannt („endet heute um 22 Uhr“) gegen sanften Anstoß. Echte Fristen sind tendenziell SMS’ Heimspiel – die Mechanik steht in So nutzen Sie SMS für zeitkritische E-Commerce-Angebote.
- Personalisierung und Absenderidentität. Vorname gegen keiner; Platzierung des Shopnamens am Anfang gegen am Ende. Kleine Effekte – nur testbar, sobald Ihre Flows Ihnen Volumen liefern.
Die zwei Testarenen: Kampagnen für große Sprünge, Flows für alles andere
Kampagnen-Splits
Nutzen Sie Broadcast-Kampagnen, um Sprossen eins und zwei zu testen – Änderungen, von denen Sie erwarten, dass sie die Ergebnisse um die Hälfte oder mehr verschieben. Praktische Regeln:
- 50/50-Aufteilung, ganzes Listensegment, dieselbe Minute. Testen Sie nicht 10 % gegen 10 % und „rollen Sie den Sieger aus“, wie es die E-Mail-Leute tun; auf einer SMS-Liste ist eine 10-%-Zelle statistisch nutzlos.
- Entscheiden Sie die Kennzahl vor dem Versand. Umsatz pro Nachricht, aufgeschrieben. Sonst reden Sie sich diejenige Variante schön, die der Idee schmeichelt, die Ihnen gefiel.
- Lassen Sie das Attributionsfenster schließen, bevor Sie urteilen. Ergebnisse eine Stunde nach dem Versand zu lesen, krönt die Impuls-Variante und verbirgt den langsamen Umwandler.
- Wiederholen Sie den Sieger einmal. Ein Ergebnis, das sich bei einer zweiten Kampagne reproduziert, ist ein Befund; ein Einzelfall ist Wetter.
Flow-Splits – wo kleine Shops den Großteil ihres Testens tun sollten
Ein A/B-Split innerhalb einer Automatisierung (Warenkorbabbruch, Willkommen, Wieder-auf-Lager) schickt jeden Eintretenden für immer einen von zwei Zweigen hinunter und sammelt Woche für Woche Stichprobe an. Ein Shop, der zu klein ist, um aus einem Kampagnen-Split etwas zu lernen, kann durchaus aus einem Warenkorb-Flow-Split lernen, der drei Monate läuft. Das ist die einzelne nützlichste Anpassung für Shops unter ein paar Tausend SMS-Abonnenten: Hören Sie auf, Kampagnen zu testen, für die Sie nicht das Volumen haben, und parken Sie stattdessen einen guten Test in Ihrem trafficstärksten Flow.
Eine Warnung: Beenden Sie einen Flow-Test niemals mitten in der Saison. Ein Split, der durch eine Sale-Periode lief, hat Sale-Perioden-Daten in demjenigen Zweig eingebacken, der Glück hatte; fahren Sie ihn über vergleichbare Wochen.
Ein durchgerechnetes Beispiel (illustrativ)
Ein Shop mit 2.400 SMS-Abonnenten will wissen, ob sein Warenkorb-Rückholtext einen Rabatt braucht.
- Variante A: „Dein Warenkorb wartet – der Checkout dauert 30 Sekunden: [link]“
- Variante B: Dasselbe, plus „10 % Rabatt mit Code BACK10.“
- Arena: 50/50-Split im Warenkorb-Flow, 10 Wochen lang gefahren, ~600 Eintretende pro Zweig.
- Ergebnis: A konvertiert 6,1 % der Eintretenden bei 58 € Durchschnittsbestellwert; B konvertiert 7,4 % bei 52 € nach Rabatt. Umsatz pro Eintretendem: A 3,54 €, B 3,85 €.
B gewinnt beim Umsatz – aber um 9 %, während es jedem Käufer einen Code gibt. Wenn die Marge dünn ist, könnte A’s rabattfreie 3,54 € trotzdem das bessere Geschäft sein. Diese Ermessensentscheidung ist der Punkt: Die Aufgabe des Tests ist es, die Wirkung des Rabatts zu bepreisen, damit Sie mit Zahlen statt mit Bauchgefühl entscheiden können. (Alle Zahlen erfunden, um die Mechanik zu zeigen.)
Kennzahlen: die Anzeigetafel, der Reihe nach
- Umsatz pro gesendeter Nachricht – der Sieger-Bestimmer, abzüglich Rabatten.
- Conversion-Rate pro Klick – sagt Ihnen, ob die Nachricht oder die Landingpage der Engpass ist.
- Klickrate – nur zur Diagnose. Krönt niemals allein einen Sieger.
- Abmelderate pro Variante – das Veto. Eine Variante, die den Umsatz um 5 % gewinnt, während sie die Abmeldungen verdoppelt, borgt sich vom nächsten Quartal.
Und messen Sie alles gegen ein konsistentes Attributions-Setup – wenn Sie nicht festgenagelt haben, wie Ihre Plattform SMS-Umsatz zählt, tun Sie das zuerst über So messen Sie den Umsatz aus E-Commerce-SMS-Marketing, sonst erben Ihre Testergebnisse dessen Mehrdeutigkeit.
Wo Omnisend hineinpasst
Ich führe diese Tests in Omnisend in meinen eigenen Shops durch. Die relevante Mechanik: Kampagnen-A/B-Testing teilt einen SMS-Versand auf und berichtet Umsatz pro Variante, nicht nur Klicks – was angesichts all des Obigen wichtig ist – und die Split-Blöcke des Flow-Builders machen die dauerhaft laufenden Automatisierungstests zu einer Drag-and-drop-Angelegenheit, mit Umsatz pro Zweig im Flow-Report. Dass E-Mail und SMS in einem Workflow zusammenleben, bedeutet außerdem, dass ein Test die Kanallogik respektieren kann, etwa nur Leute anzutexten, die die E-Mail ignoriert haben.
Was das Tool nicht tun wird, ist Sie davon abzuhalten, einen unterdimensionierten Test zu fahren. Es wird bereitwillig 400 Leute aufteilen und ein selbstsicher aussehendes Diagramm rendern. Die Zurückhaltung – nur große Sprünge, Flows statt Kampagnen bei kleinem Maßstab, Umsatz statt Klicks – muss von Ihnen kommen.
Ihr nächster Schritt
Wählen Sie Ihre trafficstärkste SMS-Automatisierung und richten Sie diese Woche einen Split ein: Rabatt gegen keinen oder Ihre aktuelle Nachricht gegen eine Ein-Segment-Neufassung. Stellen Sie eine Kalendererinnerung auf acht Wochen hin und spähen Sie nicht, bevor sie ausgelöst wird. Während dieser Test sich ansammelt, stellen Sie sicher, dass die Nachrichten selbst von einer soliden Grundlinie ausgehen, mit Wann sollte ein Onlineshop SMS versenden.
