Das kleine 1×1 für Online-Tests

© BillionPhotos.com / Fotolia.com

Jeder Digital-Marketer kennt das: Ein Test nach dem anderen – heute ein riesen Erfolg und morgen versteht man nicht, warum sich nach all den positiven Tests die gesamte Performance aber nicht verbessert?!? Aber bestimmt waren ja externe Faktoren Schuld daran…

Eines der zentralen Elemente im digitalen Marketing ist Testing und dennoch, meiner Erfahrung nach, oft viel zu wenig professionell umgesetzt.

Deswegen habe ich hier das kleine 1×1 für Online-Tests zusammengestellt – der Erfolg kommt aber nur durch konsequentes Einhalten dessen und nicht bloß durch Zustimmung zu den Punkten! 😉

1. Backlog: Test-Ideen entwickeln

Ideen kommen von allen Seiten: Mitarbeiter, Partner, Dienstleister, Chefs oder auch der Lebenspartner oder Freunde. Die Quellen für gute Ideen sind vielfältig und oft auch unkonventionell.

All diese Vorschläge (Hypothesen) gilt es zuerst zu sammeln und zu clustern. Erstelle einen Backlog an Verbesserungsideen, so könnt ihr alle im Überblick behalten und priorisieren.

2. Test-Roadmap: Richtig priorisieren

Um fundierte Entscheidungen zu treffen ist es wichtig ein möglichst objektives Bewertungssystem zu verwenden. Die verfügbaren Ressourcen sind immer limitiert, und somit ist es wichtig nur das zu testen, was auch ein gutes Kosten-Nutzen-Verhältnis aufweist.

Es ist also sinnvoll einen kleinen Business-Case zu rechnen:

  • Nutzen: Impressions, Clicks/Traffic, CVR, Basket etc auf der einen Seite ergeben einen erwarteten KPI-Anstieg (bspw. Umsatz- oder CTR-Anstieg)
  • Kosten: Aufwände im Backend, Frontend, Marketing-Team, etc stehen dem erwarteten Nutzen gegenüber

Daraus ergibt sich nun die Test-Roadmap – priorisiere anhand dem erwarteten Nutzen und den notwendigen Aufwänden.

3. Test-Konzept: Experimente richtig aufsetzen

Die Qualität der Tests bestimmt die Vorwärtsbewegungen ganz wesentlich. Das Test-Konzept sollte deswegen folgende Fragen beantworten:

  • Welche Hypothese soll getestet werden?
  • Auf welche KPIs hat dieser Test die Auswirkung? Was sind die richtige KPIs um den Effekt zu messen?
  • Wie sieht der relevante Ergebnis-Report aus?
  • Welche störenden Dimensionen können auftreten (zB mobile vs Desktop-Traffic verfälscht oft Tests)? Und wie können diese isoliert werden (bspw. nur Desktop-Traffic für den Test heranziehen)…
  • Ab wann ist der Test signifikant und wie viel Minimum-Traffic wird dazu benötigt?
  • Welches Risiko besteht bei der Durchführung eines Tests und was wird in diesen Edge-Cases gemacht? (bpw. wie viel Marketing-Budget wird für den Traffic aufgewandt und was passiert, wenn die CVR einbricht?)
  • Wurde eine Kontrollgruppe eingerichtet?

Hier die Idee eines A/B Split-Tests:

Ab-test

4. Test durchführen

Jetzt ist die Phase, wo man am Besten gar nichts mehr macht. 🙂

Natürlich empfehle ich insbesondere zu Beginn und von Zeit zu Zeit zu prüfen, ob alles sauber läuft und auch das Tracking und Reporting zu checken. Evtl auch Zwischenergebnisse prüfen und mit anderen Teams teilen.

5. Testergebnis: Dokumentieren, teilen und archivieren

Das Ergebnis muss nun analysiert und dokumentiert werden. Wurden alle Elemente des Test-Konzepts erfüllt, dann hat man nun eine klare Aussage und Handlungsempfehlung. Diese Learnings sollten nun mit allen im Team geteilt werden.

Um eine stetige Vorwärtsentwicklung zu garantieren, sind nicht nur die Test-Qualität und die Anzahl von Tests entscheidend. Der Einsatz von bereits gelerntem KnowHow ist ein wesentlicher Erfolgsfaktor, um eine größere Erfolgswahrscheinlichkeit und einen Vorteil gegenüber Wettbewerbern zu erlangen.

Ein schlechter Test ist nicht ein Test mit einem negativem Ergebnis. Ein schlechter Test ist ein Test ohne Ergebnis!

Welche Erfahrungen habt ihr bei Testingprojekten gesammelt? Über Feedback würde ich mich freuen!

 

Titel-Foto © BillionPhotos.com / Fotolia.com

Kommentar verfassen

Trage deine Daten unten ein oder klicke ein Icon um dich einzuloggen:

WordPress.com-Logo

Du kommentierst mit Deinem WordPress.com-Konto. Abmelden /  Ändern )

Google+ Foto

Du kommentierst mit Deinem Google+-Konto. Abmelden /  Ändern )

Twitter-Bild

Du kommentierst mit Deinem Twitter-Konto. Abmelden /  Ändern )

Facebook-Foto

Du kommentierst mit Deinem Facebook-Konto. Abmelden /  Ändern )

Verbinde mit %s