etracker Academy Block IV: EinTesting Guide Der A/B-Testing Prozess Vier Schritte, um einen guten A/B-Test zu erstellen, der Ihnen Ergebnisse liefert: 1. 2. 3. 4. November 14 Messen Priorisieren Durchführen Wiederholen © 2014 etracker GmbH 2 1. Messen Was passiert auf meiner Website? Um das zu erfahren, brauche ich die richtigen Daten. Dafür muss ich: Business-Ziel definieren Website-Ziel definieren KPIs festlegen Erfolgsereignisse definieren Zielwerte festlegen (Wert, Zeit, Verantwortlichkeit) Warum passiert es? Befragung der Nutzer Feedbacks, Befragungs-Mails November 14 © 2014 etracker GmbH 3 1. Messen Segmentierung der Daten – Was für die einen richtig ist, kann für andere falsch sein: Herkunft / Kanal Wiederkehrer Ergebnis (Kauf / Registrierung) November 14 © 2014 etracker GmbH 4 2. Priorisieren Was soll getestet werden? Top Landing-Pages (Startseite?) Templates (Übersichtsseiten, Detailseiten, …) Welches Verbesserungspotential gibt es auf diesen Seiten? Bounce-Rate Conversion-Rate Traffic-Volumen, Besucher-Volumgen Kosten (der Besucher-Generierung) Wie einfach ist es, diese Seite zu testen und zu verändern? Technische Hürden „Politische Hürden“ November 14 © 2014 etracker GmbH 5 3. Testen 1) Hypothese aufstellen Eine gute Hypothese ist … testbar … hat als Ziel, Konversionsprobleme zu lösen … bringt Erkenntnisse zu Kunden und Konsumenten 2) Statistische Relevanz beachten Confidenz-Intervall / Signifikanz von 95% beachten Ausreichende Fallzahl berücksichtigen Laufzeit muss alle Zielgruppen erfassen November 14 © 2014 etracker GmbH 6 3. Testen Beispiele: Die „Low-Hanging Fruits“ Call-to-action: Platzierung, Benennung, Größe, Farbe … Texten: Wert darstellen, Produktinformationen Formulare: Länge, Texte, Input-Felder Layout: Homepage, Landing-Pages, Inhaltsseiten Preis Bilder: Größe, Position, Inhalt Content-Umfang: Kurz und knapp vs. lang und informativ November 14 © 2014 etracker GmbH 7 4. Wiederholen „Never stop testing, and your advertiszing will never stop improving“ (David Ogilvy) Optimierungen sind immer möglich Anpassung an das Marktumfeld / Marktveränderungen Local Maximum vs. Optimum > verschiedene Variablen testen November 14 © 2014 etracker GmbH Hypothesen aufstellen und testen Maßnahmen festlegen Analysieren Anpassen Messen 8 Typische Fehler beim A/B-Test Zu frühes Beenden des Tests Laufzeit: weniger als 1 Woche Zu geringer Traffic / zu wenig Conversions auf der Seite Keine Hypothese Ohne begleitende Web Analyse Zeitverschwendung mit sinnlosen Tests Aufgeben, wenn der erste Test fehlgeschlagen ist Mehr Varianten statt A/B Tests parallel laufen lassen Kleine Erfolge ignorieren Kein fortlaufendes Testen November 14 © 2014 etracker GmbH 9