A/B-Tests und Optimierung

A/B-Test: E-Mail oder SMS als Follow-up

Veröffentlicht am July 19, 2026 von

Um E-Mail gegen SMS als Follow-up zu testen, teilst du Kontakte, die in beide Kanäle eingewilligt haben, zufällig in zwei Zweige derselben Automatisierung, sendest dieselbe Botschaftsabsicht mit derselben Verzögerung durch jeden Kanal und beurteilst das Ergebnis anhand des Gewinns pro Empfänger – niemals anhand der Klickrate, weil SMS Kosten pro Nachricht verursacht und E-Mail kaum. Genau an diesem letzten Punkt gehen die meisten Kanal-Tests schief: SMS liefert oft hübschere Engagement-Zahlen, während sie beim Geld leise verliert. Dieser Artikel behandelt, wie du den Test so aufsetzt, dass der Vergleich fair ist, die eine Zielgruppen-Falle, die SMS in fast jedem naiven Test schmeichelt, und wie du entscheidest, was jeder Kanal übernehmen soll, sobald die Ergebnisse da sind. Es geht darum, für einen bestimmten Follow-up-Moment zwischen Kanälen zu wählen – das Testen innerhalb eines Kanals (Betreffzeilen, Timing, Angebote) ist eine andere Aufgabe.

Die eigentliche Frage: Welcher Kanal verdient sich diesen Moment

Du entscheidest nicht „ist SMS gut“. Du entscheidest, ob ein bestimmtes Follow-up – der zweite Warenkorbabbruch-Kontakt, der Cross-Sell-Anstoß am Liefertag, die Rückgewinnungserinnerung – als Textnachricht oder als E-Mail besser abschneidet. Die Antwort variiert wirklich von Moment zu Moment. Ein zeitkritischer Anstoß („dein Warenkorb läuft heute Nacht ab“) spielt das aus, was eine Textnachricht gut kann: Sie wird schnell gesehen. Ein Follow-up, das Produktbilder und ein paar Sätze Überzeugungsarbeit braucht, spielt der E-Mail in die Hände.

Händler neigen dazu, den Test zu überspringen und aus dem Bauch heraus zu handeln, und der Bauch stammt meist aus den eigenen Handy-Gewohnheiten. Das ist eine Stichprobengröße von eins. Die Einwilligungslisten, das Alter und die Länder deiner Kunden werden eine andere Antwort liefern als dein Bauchgefühl, und der einzige Weg, es zu wissen, ist ein kontrollierter Split.

Warum „einfach überall SMS dazu“ nicht die Lösung ist

Der übliche Schritt, nachdem man gelesen hat, dass SMS hohe Öffnungsraten erzielt, ist, an jeden Flow eine Textnachricht anzuschrauben. Zwei Probleme.

Die Kosten sind das offensichtliche. E-Mail ist pro Sendung nahezu kostenlos; SMS wird pro Nachricht abgerechnet, und die Preise variieren stark je nach Land – oft ein paar Cent pro Text in den USA und merklich mehr in weiten Teilen Europas. Multipliziere ein paar Cent mit jedem abgebrochenen Warenkorb über ein Jahr, und der Kanal muss E-Mail deutlich übertreffen, nicht bloß gleichziehen, bevor er die Gewinnschwelle erreicht.

Die Ermüdung ist das leisere Problem. Das Postfach toleriert eine mittelmäßige E-Mail; ein Handy-Vibrieren ist aufdringlicher, und der Ausgang ist härter. Wer von einer Textnachricht genervt ist, überfliegt sie nicht einfach – er antwortet STOPP, und diese Einwilligung kommt selten zurück. Den Kanal zu überladen verbraucht ein knappes Gut. Die ehrliche Frage lautet also nie „sollten wir SMS nutzen“, sondern „welcher eine oder zwei Momente rechtfertigen es“ – und genau das beantwortet ein Test.

Die Falle, die SMS schmeichelt: Deine SMS-Liste ist nicht deine E-Mail-Liste

Hier ist, was ein naiver Vergleich übersieht, und es entkräftet die meisten beiläufigen „SMS hat E-Mail 3-zu-1 geschlagen“-Behauptungen, die du hören wirst.

Die Menschen, die dir ihre Telefonnummer gegeben und das SMS-Einwilligungskästchen angehakt haben, sind ein selbstselektierter Ausschnitt deiner Zielgruppe mit höherer Kaufabsicht. Sie haben eine höhere Hürde genommen als jemand, der für 10 % Rabatt eine E-Mail in ein Popup getippt hat. Vergleiche „SMS an die SMS-Liste“ mit „E-Mail an die gesamte E-Mail-Liste“, und SMS gewinnt, bevor die Nachricht überhaupt geschrieben ist – du vergleichst deine begeistertsten Kunden mit allen.

Die Lösung ist einfach und nicht verhandelbar: Führe den Test nur mit Kontakten durch, die für beide Kanäle angemeldet sind, zufällig aus diesem gemeinsamen Pool gesplittet. Die eine Hälfte bekommt das Follow-up per E-Mail, die andere per Text. Gleicher Auslöser, gleiche Verzögerung, gleiches Angebot, gleiches Linkziel. Jetzt sind die Zielgruppen gleichwertig und der Kanal ist die einzige Variable – dieselbe Isolationsdisziplin, die in wie du eine Variable nach der anderen testest beschrieben ist, angewandt auf Kanäle.

Beachte, was dich das kostet: Der Beide-Kanäle-Pool ist meist nur ein Bruchteil deiner E-Mail-Liste, also läuft der Test langsam auf. Rechne damit, ihn über Wochen zu fahren, nicht über Tage.

Den Test aufsetzen, Schritt für Schritt

Wähle einen Follow-up-Moment. Der stärkste Kandidat ist meist ein Kontakt mitten im Flow bei Warenkorbabbruch oder Rückgewinnung – eine Nachricht, deren Aufgabe ein kurzer Anstoß ist und die plausibel von beiden Kanälen getragen werden könnte. Wo dieser Kontakt in der Sequenz sitzt, spielt ebenfalls eine Rolle; A/B-Test des Timings beim Warenkorbabbruch behandelt die Frage der Verzögerung gesondert, also lege das Timing zuerst fest und halte es hier konstant.
Baue den Split innerhalb der Automatisierung. Am Punkt des Follow-ups fügst du einen zufälligen 50/50-Zweig ein: Pfad A sendet die E-Mail-Version, Pfad B die SMS-Version. Die Mechanik des Splittens von Flows – und die Geduld, die sie verlangt – wird in wie du Automatisierungszweige per A/B-Test testest behandelt.
Gleiche die Nachrichten ehrlich an. Gleiche Kernbotschaft, gleiches Angebot, gleiches Ziel. Die SMS wird zwangsläufig kürzer sein – das ist der Kanal, kein Störfaktor. Was du nicht darfst: der SMS einen Rabatt geben, den die E-Mail nicht hat.
Kennzeichne die Links getrennt, damit Bestellungen dem richtigen Zweig zugeordnet werden.
Entscheide die Kennzahl vor dem Start: Gewinn pro Empfänger. Umsatz pro Empfänger in jedem Zweig, minus Kanalkosten pro Empfänger, minus Rabattkosten, falls vorhanden. Schreib die SMS-Kosten pro Nachricht auf, bevor du beginnst, damit hinterher niemand darüber streitet.
Lege dich vorab auf eine Stichprobengröße und ein Enddatum fest und widerstehe dem Reinschauen. Kleine Pools erzeugen frühes, lautes Rauschen. Wenn dein Beide-Kanäle-Pool nur ein paar hundert Kontakte umfasst, sei ehrlich, dass ein sauberes Ablesen ein paar Monate dauern kann – oder verschiebe den Test, bis der Pool wächst.

Ein durchgerechnetes Beispiel (illustrativ)

Angenommen, 1.000 Kontakte fließen über acht Wochen durch jeden Zweig. Der E-Mail-Zweig erzeugt 30 Bestellungen bei einem durchschnittlichen Bestellwert von 60 €: 1.800 €, faktisch keine Sendekosten, also 1,80 € Umsatz pro Empfänger. Der SMS-Zweig erzeugt 38 Bestellungen beim selben Wert: 2.280 €, minus etwa 0,05 € × 1.000 = 50 € an Nachrichtenkosten, also rund 2,23 € pro Empfänger. Hier gewinnt SMS beim Geld, nicht nur bei den Klicks – aber beachte, wie die Antwort kippt, wenn SMS 31 Bestellungen erzeugt hätte oder wenn dein Preis pro Nachricht durch den Versand in ein teureres Land verdreifacht würde. Die Rechnung ist trivial; die Disziplin besteht darin, sie zu machen, statt die Klickraten abzufotografieren. (Alle Zahlen illustrativ.)

Ob eine solche Lücke echt ist oder Rauschen – und was du mit einem knappen Unentschieden tust –, ist ein eigenes Thema, behandelt in einen Gewinner beim E-Mail-Test auswählen.

Was du mit der Antwort machst

Das Ergebnis ist meist nicht „ein Kanal gewinnt alles“. Es ist eine Arbeitsteilung: SMS verdient sich die ein oder zwei dringenden Momente mit kurzer Zündschnur, in denen sie E-Mail klar übertroffen hat; E-Mail behält alles, was Bilder, Länge oder einen weniger drängenden Ton braucht. Manche Händler landen bei einer Sequenz – zuerst E-Mail, SMS nur für den finalen Anstoß an Nicht-Öffner –, die ein Follow-up-Test gegen den Einzelkanal-Gewinner validieren kann.

Behalte eine Zahl außerhalb des Tests im Auge: die SMS-Abmelderate über das gesamte Programm. Ein Kanal kann einen einzelnen Test gewinnen und dabei die Liste erodieren, die künftige Gewinne erst möglich macht. Wenn die STOPP-Raten steigen, nachdem du SMS ausgeweitet hast, steckt der langfristige Preis noch nicht in der Zweig-Rechnung – aber er ist real.

Wo Omnisend hineinpasst

Dieser Test ist der Grund, warum sich eine kombinierte E-Mail-plus-SMS-Plattform bezahlt macht. Als ich für meine eigenen Shops Klaviyo und Omnisend verglichen habe, war einer der ausschlaggebenden Faktoren, wie selbstverständlich Omnisend SMS als vollwertigen Schritt innerhalb derselben Automatisierung behandelt – du lässt einen E-Mail-Schritt oder einen SMS-Schritt in denselben Flow fallen, splittest die Zielgruppe und liest den Umsatz beider Zweige in einem Report ab, statt die Dashboards zweier Tools zusammenzustückeln. Die Einwilligung wird pro Kanal erfasst, was das Aufbauen des „für beide angemeldet“-Testpools unkompliziert macht. Omnisend ist Affiliate-Partner von Shopimation, und der ehrliche Vorbehalt bleibt: Keine Plattform repariert einen Test, der auf nicht übereinstimmenden Zielgruppen läuft. Der obige Aufbau zählt mehr als das Tool.

Dein nächster Schritt

Zähle die Kontakte auf deiner Liste, die sowohl für E-Mail als auch für SMS angemeldet sind. Diese eine Zahl sagt dir, ob dieser Test jetzt bereit ist zu laufen oder ob deine erste Aufgabe darin besteht, die SMS-Einwilligung zu vergrößern. Wenn der Pool da ist, baue diese Woche den 50/50-Zweig auf deinem meistfrequentierten Follow-up-Moment – und wenn du noch nie eine Automatisierung gesplittet hast, beginne mit wie du Automatisierungszweige per A/B-Test testest.

A/B-testiranje in optimizacija

A/B-test: nadaljnje sporočilo po emailu ali SMS-u

Veröffentlicht am July 18, 2026 von

Email proti SMS-u kot nadaljnje sporočilo testiraš tako, da stike, ki so privolili v oba kanala, naključno razdeliš v dve veji iste avtomatizacije, skozi vsak kanal z enakim zamikom pošlješ sporočilo z enakim namenom in rezultat sodiš po dobičku na prejemnika — nikoli po stopnji klikov, ker SMS nosi strošek na sporočilo, email pa komajda. Prav ta zadnji del je tam, kjer gre večina testov kanalov narobe: SMS pogosto objavlja lepše številke angažiranosti, medtem ko tiho izgublja pri denarju. Ta članek pokriva, kako test nastaviti tako, da je primerjava poštena, eno past občinstva, ki v skoraj vsakem naivnem testu polepša SMS, in kako se odločiti, kaj naj vsak kanal prevzame, ko so rezultati zbrani. Gre za izbiro med kanaloma za določen trenutek nadaljevanja — testiranje znotraj kanala (zadeve, čas, ponudbe) je drugo delo.

Pravo vprašanje: kateri kanal si zasluži ta trenutek

Ne odločaš se “ali je SMS dober”. Odločaš se, ali določeno nadaljevanje — drugi dotik pri opuščeni košarici, spodbuda za prodajo dodatkov na dan dostave, opomnik za ponovno pridobitev — deluje bolje kot sporočilo ali kot email. Odgovor se resnično razlikuje glede na trenutek. Časovno občutljiva spodbuda (“tvoja košarica poteče nocoj”) igra na to, kar SMS počne dobro: hitro ga opaziš. Nadaljevanje, ki potrebuje slike izdelkov in nekaj stavkov prepričevanja, igra na email.

Trgovci ponavadi test preskočijo in delujejo po občutku, občutek pa običajno izvira iz njihovih lastnih navad na telefonu. To je velikost vzorca ena. Seznami privolitev, starosti in države tvojih strank bodo dali drugačen odgovor kot tvoj trebušni občutek, in edini način, da to izveš, je nadzorovana delitev.

Zakaj “kar dodaj SMS povsod” ni rešitev

Običajna poteza po branju, da ima SMS visoke stopnje odpiranj, je pritrditi sporočilo na vsak tok. Dve težavi.

Strošek je očitna. Email je skoraj brezplačen na pošiljko; SMS se zaračunava na sporočilo, cene pa se močno razlikujejo po državah — pogosto nekaj centov na sporočilo v ZDA in opazno več v velikem delu Evrope. Pomnoži nekaj centov z vsako opuščeno košarico skozi vse leto in kanal mora email občutno preseči v prodaji, ne le izenačiti, preden pride na ničlo.

Utrujenost je tišja. Nabiralnik prenese povprečen email; brnenje telefona je bolj vsiljivo, izhod pa ostrejši. Kdor ga sporočilo razjezi, ga ne preleti mimo — odpiše STOP, in ta privolitev se redko vrne. Preobremenjevanje kanala porablja redko dobrino. Zato pošteno vprašanje ni nikoli “ali naj uporabljamo SMS”, ampak “kateri eden ali dva trenutka ga upravičita”, in prav na to odgovori test.

Past, ki polepša SMS: tvoj SMS-seznam ni tvoj email-seznam

Tukaj je stvar, ki jo naivna primerjava spregleda in ki razveljavi večino ležernih trditev “SMS je premagal email 3 proti 1”, ki jih boš slišal.

Ljudje, ki so ti dali svojo telefonsko številko in obkljukali polje za privolitev v SMS, so samoizbrana rezina občinstva z višjim namenom. Preskočili so višjo oviro kot nekdo, ki je vpisal email v pojavno okno za 10 % popusta. Primerjaj “SMS pošlje SMS-seznamu” nasproti “email pošlje celotnemu email-seznamu” in SMS zmaga, še preden je sporočilo sploh napisano — primerjaš svoje najbolj vnete stranke z vsemi.

Popravek je preprost in neizogiben: test zaženi samo na stikih, naročenih na oba kanala, naključno razdeljenih iz te skupne množice. Polovica dobi nadaljevanje po emailu, polovica po sporočilu. Enak sprožilec, enak zamik, enaka ponudba, enak cilj povezave. Zdaj so občinstva enakovredna in kanal je edina spremenljivka — enaka disciplina izolacije, opisana v kako testirati samo eno spremenljivko naenkrat, uporabljena na kanalih.

Upoštevaj, kaj te to stane: množica z obema kanaloma je običajno le delček tvojega email-seznama, zato se test nabira počasi. Pričakuj, da bo tekel tedne, ne dneve.

Nastavitev testa, korak za korakom

Izberi en trenutek nadaljevanja. Najmočnejši kandidat je običajno dotik sredi toka pri opuščeni košarici ali ponovni pridobitvi — sporočilo, katerega naloga je kratka spodbuda, kjer bi ga verjetno lahko nosil kateri koli kanal. Pomembno je tudi, kje v zaporedju ta dotik sedi; A/B-testiranje časa pri opuščeni košarici obravnava vprašanje zamika posebej, zato najprej uredi čas in ga tu ohrani konstantnega.
Zgradi delitev znotraj avtomatizacije. Na točki nadaljevanja dodaj naključno vejo 50/50: pot A pošlje email različico, pot B SMS različico. Mehanika delitve tokov — in potrpljenje, ki ga zahteva — je pokrita v kako A/B-testirati veje avtomatizacije.
Sporočili ujemi pošteno. Enaka jedrna vrstica, enaka ponudba, enak cilj. SMS bo nujno krajši — to je kanal, ne motnja. Česar ne smeš, je dati SMS-u popust, ki ga email nima.
Povezavama dodaj ločeni oznaki, da se naročila pripišejo pravi veji.
Merilo določi pred zagonom: dobiček na prejemnika. Prihodek na prejemnika v vsaki veji, minus strošek kanala na prejemnika, minus strošek popusta, če je. Strošek SMS-a na sporočilo zapiši, preden začneš, da se pozneje nihče ne prepira o njem.
Vnaprej se zaveži velikosti vzorca in datumu konca ter se upri kukanju. Majhne množice dajejo glasen zgodnji šum. Če je tvoja množica z obema kanaloma le nekaj sto stikov, bodi pošten, da lahko čisto branje traja nekaj mesecev — ali test odloži, dokler množica ne zraste.

Izdelani primer (ilustrativno)

Recimo, da skozi vsako vejo v osmih tednih preteče 1.000 stikov. Email veja ustvari 30 naročil pri povprečni vrednosti naročila 60 €: 1.800 €, praktično brez stroška pošiljanja, torej 1,80 € prihodka na prejemnika. SMS veja ustvari 38 naročil pri enaki vrednosti: 2.280 €, minus približno 0,05 € × 1.000 = 50 € stroškov sporočil, torej okoli 2,23 € na prejemnika. Tu SMS zmaga pri denarju, ne le pri klikih — a opazi, kako se odgovor obrne, če bi SMS ustvaril 31 naročil ali če bi bila tvoja cena na sporočilo potrojena zaradi pošiljanja v dražjo državo. Matematika je trivialna; disciplina je v tem, da jo narediš, namesto da fotografiraš stopnje klikov. (Vse številke ilustrativne.)

Ali je taka razlika resnična ali šum — in kaj storiti pri skorajšnjem izenačenju — je svoja tema, pokrita v izbira zmagovalnega email testa.

Kaj storiti z odgovorom

Izid običajno ni “en kanal zmaga v vsem”. Je delitev dela: SMS si zasluži tisti eden ali dva nujna, kratkoročna trenutka, kjer je jasno zaslužil več kot email; email obdrži vse, kar potrebuje slike, dolžino ali manj pritiskajoč ton. Nekateri trgovci pristanejo na zaporedju — najprej email, SMS le za zadnjo spodbudo tistim, ki niso odprli — kar lahko test nadaljevanja preveri nasproti zmagovalcu z enim kanalom.

Bodi pozoren na eno številko zunaj testa: stopnjo odjav od SMS-a v celotnem programu. Kanal lahko zmaga en sam test, medtem ko načenja seznam, ki omogoča prihodnje zmage. Če se stopnje STOP dvignejo, potem ko razširiš SMS, dolgoročni strošek še ni v matematiki veje — a je resničen.

Kje se vklopi Omnisend

Ta test je razlog, zakaj se združena platforma za email in SMS izplača. Ko sem za svoje trgovine primerjal Klaviyo in Omnisend, je bil eden odločilnih dejavnikov to, kako naravno Omnisend obravnava SMS kot polnopravni korak znotraj iste avtomatizacije — v isti tok spustiš email korak ali SMS korak, razdeliš občinstvo in prebereš prihodek obeh vej v enem poročilu, namesto da bi sešival nadzorne plošče dveh orodij. Privolitev se spremlja po kanalih, kar poenostavi gradnjo testne množice “naročen na oba”. Omnisend je partner Shopimationa v affiliate programu, in pošteno opozorilo velja: nobena platforma ne popravi testa, zagnanega na neujemajočih se občinstvih. Zgornja nastavitev je pomembnejša od orodja.

Tvoj naslednji korak

Preštej stike na svojem seznamu, ki so naročeni tako na email kot na SMS. Ta ena številka ti pove, ali je ta test pripravljen za zagon zdaj ali pa je tvoje prvo delo rast privolitev v SMS. Če je množica tu, ta teden zgradi vejo 50/50 na svojem najbolj obremenjenem trenutku nadaljevanja — in če še nikoli nisi razdelil avtomatizacije, začni z kako A/B-testirati veje avtomatizacije.

A/B Testing and Optimization

A/B Testing Email vs SMS Follow-Up

Veröffentlicht am July 17, 2026 von

To test email against SMS as a follow-up, split contacts who have consented to both channels randomly into two branches of the same automation, send the same message intent through each channel at the same delay, and judge the result on profit per recipient — never on click rate, because SMS carries a per-message cost and email barely does. That last part is where most channel tests go wrong: SMS often posts prettier engagement numbers while quietly losing on money. This article covers how to set the test up so the comparison is fair, the one audience trap that flatters SMS in almost every naive test, and how to decide what each channel should own once the results are in. It’s about choosing between channels for a specific follow-up moment — testing within a channel (subject lines, timing, offers) is a different job.

The real question: which channel earns this moment

You’re not deciding “is SMS good.” You’re deciding whether a specific follow-up — the second abandoned-cart touch, the delivery-day cross-sell nudge, the win-back reminder — performs better as a text or as an email. The answer genuinely varies by moment. A time-sensitive nudge (“your cart expires tonight”) plays to what a text does well: it gets seen fast. A follow-up that needs product images and a few sentences of persuasion plays to email.

Merchants tend to skip the test and run on instinct, and the instinct usually comes from their own phone habits. That’s a sample size of one. Your customers’ consent lists, ages, and countries will produce a different answer than your gut, and the only way to know is a controlled split.

Why “just add SMS everywhere” isn’t the fix

The usual move after reading that SMS gets high open rates is to bolt a text onto every flow. Two problems.

Cost is the obvious one. Email is close to free per send; SMS is billed per message, and prices vary a lot by country — often a few cents per text in the US, and noticeably more in much of Europe. Multiply a few cents by every abandoned cart across a year and the channel needs to outsell email meaningfully, not just match it, before it breaks even.

Fatigue is the quieter one. The inbox tolerates a mediocre email; a phone buzz is more intrusive, and the exit is harsher. Someone annoyed by a text doesn’t skim past it — they reply STOP, and that consent rarely comes back. Overloading the channel spends a scarce asset. So the honest question is never “should we use SMS” but “which one or two moments justify it,” and that’s precisely what a test answers.

The trap that flatters SMS: your SMS list is not your email list

Here’s the thing a naive comparison misses, and it invalidates most casual “SMS beat email 3-to-1” claims you’ll hear.

The people who gave you their phone number and ticked the SMS consent box are a self-selected, higher-intent slice of your audience. They cleared a higher bar than someone who typed an email into a popup for 10% off. Compare “SMS sends to the SMS list” against “email sends to the full email list” and SMS wins before the message is even written — you’re comparing your keenest customers against everyone.

The fix is simple and non-negotiable: run the test only on contacts subscribed to both channels, split randomly from that shared pool. Half get the follow-up by email, half by text. Same trigger, same delay, same offer, same link destination. Now the audiences are equivalent and the channel is the only variable — the same isolation discipline described in how to test one variable at a time, applied to channels.

Note what this costs you: the both-channels pool is usually a fraction of your email list, so the test accrues slowly. Expect to run it for weeks, not days.

Setting up the test, step by step

Pick one follow-up moment. The strongest candidate is usually a mid-flow touch in abandoned cart or win-back — a message whose job is a short nudge, where either channel could plausibly carry it. Where that touch sits in the sequence matters too; A/B testing abandoned cart timing covers the delay question separately, so settle timing first and hold it constant here.
Build the split inside the automation. At the point of the follow-up, add a random 50/50 branch: path A sends the email version, path B the SMS version. The mechanics of splitting flows — and the patience they demand — are covered in how to A/B test automation branches.
Match the messages honestly. Same core line, same offer, same destination. The SMS will necessarily be shorter — that’s the channel, not a confound. What you can’t do is give the SMS a discount the email doesn’t have.
Tag the links separately so orders attribute to the right branch.
Decide the metric before launch: profit per recipient. Revenue per recipient in each branch, minus channel cost per recipient, minus discount cost if any. Write down the SMS cost per message before you start so nobody argues about it after.
Pre-commit to a sample size and end date, and resist peeking. Small pools produce loud early noise. If your both-channels pool is only a few hundred contacts, be honest that a clean read may take a couple of months — or defer the test until the pool grows.

A worked example (illustrative)

Say 1,000 contacts flow through each branch over eight weeks. The email branch produces 30 orders at an average €60 order value: €1,800, effectively no send cost, so €1.80 revenue per recipient. The SMS branch produces 38 orders at the same value: €2,280, minus roughly €0.05 × 1,000 = €50 in message costs, so about €2.23 per recipient. Here SMS wins on money, not just clicks — but notice how the answer flips if SMS had produced 31 orders, or if your per-message price were tripled by sending into a more expensive country. The math is trivial; the discipline is doing it instead of screenshotting the click rates. (All figures illustrative.)

Deciding whether a gap like that is real or noise — and what to do with a near-tie — is its own topic, covered in choosing a winning email test.

What to do with the answer

The outcome usually isn’t “one channel wins everything.” It’s a division of labour: SMS earns the one or two urgent, short-fuse moments where it clearly out-earned email; email keeps everything that needs images, length, or a lower-pressure tone. Some merchants land on a sequence — email first, SMS only for the final nudge to non-openers — which a follow-up test can validate against the single-channel winner.

Keep an eye on one number outside the test: the SMS unsubscribe rate across the whole program. A channel can win a single test while eroding the list that makes future wins possible. If STOP rates climb after you expand SMS, the long-term cost isn’t in the branch math yet — but it’s real.

Where Omnisend fits

This test is the reason a combined email-plus-SMS platform earns its keep. When I compared Klaviyo and Omnisend for my own stores, one of the deciding factors was how naturally Omnisend treats SMS as a first-class step inside the same automation — you drop an email step or an SMS step into the same flow, split the audience, and read both branches’ revenue in one report instead of stitching together two tools’ dashboards. Consent is tracked per channel, which makes building the “subscribed to both” test pool straightforward. Omnisend is an affiliate partner of Shopimation, and the honest caveat stands: no platform fixes a test run on mismatched audiences. The setup above matters more than the tool.

Your next step

Count the contacts on your list who are subscribed to both email and SMS. That single number tells you whether this test is ready to run now or whether your first job is growing SMS consent. If the pool is there, build the 50/50 branch on your busiest follow-up moment this week — and if you’ve never split an automation before, start with how to A/B test automation branches.