Strategie

A/B-Tests in Klaviyo und was du wirklich testen solltest.

Die meisten Tests, die wir in Audits sehen, ändern drei Dinge gleichzeitig und werden nach ein paar Stunden entschieden. So machen wir es stattdessen.

Ein Element pro Test und mindestens 1.000 Impressions pro Variante, bevor du entscheidest. So testen wir Pop-ups, und beim E-Mail A/B-Test gilt eigentlich dasselbe. Änderst du zwei Dinge gleichzeitig, weißt du hinterher nicht, welches den Unterschied gemacht hat.

Die Regeln für A/B-Tests im E-Mail-Marketing

  1. Teste ein Element. Betreffzeile oder Button-Farbe, nie beides. Willst du ein komplett neues Layout testen, behandle es als einen Test mit genau einer Frage. Gewinnt das neue Layout?
  2. Schreib die Frage vorher auf. „Bringt der Code im Preview Text mehr Bestellungen?“ liefert ein klares Ja oder Nein. Ein vages „Lass mal was Neues probieren“ tut das nie.
  3. Warte, bis genug Daten da sind. Bei Pop-ups wollen wir 1.000 Impressions pro Variante. Für Mails gibt es keine magische Zahl. Jede Version braucht so viele Empfänger, dass ein paar Öffnungen oder eine große Bestellung das Ergebnis nicht kippen können.
  4. Wähl die Kennzahl, die zur Änderung passt. Mehr dazu weiter unten.
  5. Behalte den Gewinner und teste das Nächste. Ein Test lohnt sich erst, wenn das Ergebnis in den nächsten Versand einfließt.

Was du bei Betreffzeilen testest

Hier fangen wir in den meisten Accounts an, weil jede Kampagne eine neue Chance zum Testen ist. Diese Variablen nehmen wir uns der Reihe nach vor:

  • Lange gegen kurze Betreffzeilen
  • Großbuchstaben gegen Kleinschreibung
  • Mit Emoji gegen ohne
  • Mit Preview Text gegen ohne
  • Sale-Code im Preview Text gegen versteckt in der Mail
  • Mit Vornamen gegen ohne
  • Nüchtern und sachlich gegen eine popkulturelle Anspielung

Nach welchen Regeln wir Betreffzeilen schreiben und welche Paare funktionieren, steht in unserem Ratgeber zu Betreffzeilen.

Was du in Flows testest

In Flows zahlt sich ein Test am längsten aus. Eine gewinnende Kampagnenmail hilft dir bei genau einem Versand. Gewinnt dagegen eine Flow-Mail, läuft sie jeden Tag weiter, bis jemand sie ändert. Und einer der Fehler, die wir in Audits am häufigsten anmerken, sind Flows, die seit sechs Monaten oder länger keiner mehr angefasst hat.

Gute Flow-Tests aus unserer eigenen Arbeit:

  • Designed gegen Plain Text bei der letzten Mail einer Sequenz. Bei persönlichen Mails im Gründer-Stil gewinnt Plain Text oft. Mehr dazu in unserem Plain-Text-Ratgeber.
  • Wann der Rabatt kommt. Zum Beispiel in Mail 2 gegen Mail 3 eines Abbruch-Flows.
  • Das Angebot selbst, Prozent-Rabatt gegen ein Gratis-Geschenk.
  • Betreffzeilen der ersten Mail jedes Flows, weil die am häufigsten verschickt wird.

Fällt die Klickrate unter 1%, steht Testen bei uns mit auf der Liste, zusammen mit klareren Buttons, weniger Links und einer Plain-Text-Version.

Was du bei Pop-ups testest

Bei Pop-ups gibt es eine klare Reihenfolge. Erst das Angebot, dann das Design, dann das Timing. Das Angebot ist der größte Grund, warum sich Leute anmelden, deshalb testen wir es vor jeder optischen Änderung.

ReihenfolgeTestBeispiel-Varianten
1Angebot% Rabatt gegen $ Rabatt gegen Gratis-Geschenk
2Design3 Varianten
3TimingNach 6, 9 oder 12 Sekunden eingeblendet

Das komplette Setup steht in unserem Pop-up-Ratgeber.

Öffnungen, Klicks oder Bestellungen

Die Kennzahl muss zu dem passen, was du geändert hast. Eine Betreffzeile kann nur beeinflussen, ob jemand öffnet, also bewertest du sie nach Öffnungen. Alles innerhalb der Mail, vom Header bis zum Button-Text, bewertest du nach Klicks oder Bestellungen.

Und sei bei Öffnungen generell vorsichtig. Der Datenschutz von Apple Mail registriert Öffnungen, die nie wirklich stattgefunden haben. Öffnungsraten fallen dadurch hoch und unruhig aus. Für den Vergleich von zwei Betreffzeilen, die zur selben Zeit an dieselbe Zielgruppe gehen, taugen sie trotzdem. Für alles andere nimmst du Klicks.

Teste auch deine SegmenteSegment-Performance nicht zu testen ist einer der Segmentierungsfehler, die wir am häufigsten sehen. Schick ab und zu dieselbe Kampagne an dein 30-Tage- und dein 90-Tage-Engagement-Segment und vergleich die Klicks pro Empfänger. Daran siehst du, wie weit du deine Versände ausdehnen kannst, ohne dass die Ergebnisse leiden.

So richtest du den Test in Klaviyo ein

In einer Kampagne legst du einen A/B-Test an, baust die Varianten, bestimmst, welcher Anteil der Zielgruppe den Test bekommt, und wählst die Kennzahl für den Gewinner. Klaviyo kann den Gewinner nach dem Testzeitraum automatisch an den Rest schicken, oder du suchst ihn selbst aus.

In einem Flow fügst du im Flow-Builder einer einzelnen Mail einen A/B-Test hinzu. Klaviyo verteilt die Profile, die diesen Schritt erreichen, auf die Versionen. Lass den Test laufen, bis beide Versionen genug Sends haben. Dann beendest du ihn und behältst den Gewinner.

Bei SMS lohnt sich ein Test ganz besonders, nämlich MMS mit Produktbild gegen normale SMS. MMS kostet 2- bis 3-mal so viel und muss deshalb klar mehr Umsatz bringen, damit es bleiben darf.

Leon zeigt dir das im Video

Kostenlos auf YouTube.

Häufige Fragen

Was sollte ich im E-Mail-Marketing zuerst A/B-testen?

Betreffzeilen. Jede Kampagne ist eine neue Chance, eine zu testen, und die Öffnungsrate zeigt Unterschiede schnell. Bei Pop-ups testest du zuerst das Angebot.

Wie viele Empfänger brauche ich für einen A/B-Test?

Bei Pop-ups warten wir mindestens 1.000 Impressions pro Variante ab. Bei Mails sollte jede Version so viele Leute erreichen, dass eine zufällige Öffnung oder Bestellung das Ergebnis nicht entscheiden kann.

Kann ich in Klaviyo einen Flow A/B-testen?

Ja. Du fügst einer einzelnen Mail im Flow einen A/B-Test hinzu, und Klaviyo verteilt alle, die diesen Schritt erreichen, auf die Versionen. Flows lohnen sich zum Testen besonders, weil der Gewinner dort monatelang weiterläuft.

Bewerte ich einen A/B-Test nach Öffnungen oder Klicks?

Betreffzeilen bewertest du nach Öffnungen, Inhalte nach Klicks oder Bestellungen. Der Datenschutz von Apple Mail bläht die Öffnungen auf, deshalb taugen sie für nichts unterhalb der Betreffzeile.

Willst du sehen, wo bei dir noch Umsatz liegt?

Buch dir einen kostenlosen 30-Minuten-Call. Wir gehen gemeinsam durch deinen Klaviyo-Account und zeigen dir, was wir zuerst ändern würden.

Jetzt Call buchen