Ein A/B-Testplan für Mode-E-Commerce

Entwickeln Sie aus einem Problem beim Online-Modekauf eine prüfbare Hypothese mit klarer Zielgruppe, Kennzahlen, Qualitätskontrollen und Entscheidungsregel.

Ihre Frage

Was sollte vor dem Start eines Experiments im Onlineshop vereinbart werden?

Setzen Sie Ihre Erkenntnisse um
CRO-Agent ↗
DIE KURZE ANTWORT

Ein brauchbarer A/B-Testplan legt vor dem Start Kundenproblem, vorgeschlagene Änderung, Zielgruppe und Entscheidungskriterien fest. Er verbindet eine primäre Zielgröße mit Kontrollen für Datenqualität und unerwünschte Effekte. So wird ein günstiges Zwischensignal nicht mit einem vollständigen Ergebnis verwechselt.

Mit einem klaren Testplan in die Besprechung

Laden Sie das zweiseitige Arbeitsblatt herunter. Stimmen Sie den Plan vor dem Start ab und halten Sie auf der zweiten Seite Prüfungen, Entscheidung und Nachverfolgung fest.

Kostenlos und ohne Anmeldung. Drucken Sie die Karte aus oder ergänzen Sie Notizen im PDF-Programm. Berechnungen gehören in den Analyseplan; die Karte gibt keine feste Stichprobengröße vor und führt keine Experimente aus.

Von der Beobachtung zur Hypothese

Beginnen Sie mit einem konkreten Problem im Kaufprozess und den Belegen dafür. Eine Sitzungsaufzeichnung kann einen Untersuchungsanlass liefern, zeigt aber allein nicht, wie häufig das Problem auftritt. Verbinden Sie die Beobachtung mit passenden Daten zur Customer Journey und zum Produkt, bevor Sie eine Testvariante wählen.

Beschreiben Sie den vermuteten Wirkmechanismus verständlich. Ein genauer Größenhinweis neben der Größenauswahl könnte beispielsweise teilnahmeberechtigten mobilen Besuchern mehr Sicherheit geben. Benennen Sie Zielgruppe und erwartete Veränderung. Lassen Sie andere Designänderungen aus dieser Variante heraus, damit das Ergebnis interpretierbar bleibt.

Zielgrößen und Qualitätsgrenzen vorab festlegen

Microsoft unterscheidet in seinen Experimentrichtlinien übergeordnete Zielgrößen, diagnostische Kennzahlen, Qualitätsgrenzen und Datenqualitätsprüfungen. Die Empfehlungen vor und während eines Experiments betonen außerdem eine zuverlässige Zuweisung und den sorgfältigen Umgang mit frühen Ergebnissen. Sie strukturieren den Plan, liefern aber keine einheitliche Stichprobengröße oder Laufzeit für jeden Shop.

Besprechen Sie für einen Fashion-Test abgeschlossene Käufe als Zielgröße, die Nutzung der Größenberatung als diagnostisches Signal und Retouren als spätere wirtschaftliche Prüfung. Vereinbaren Sie Kontrollen für Seitengeschwindigkeit und Zuweisungsqualität. Legen Sie vor dem Start mit der experimentverantwortlichen Person Analysemethode, erforderliche Stichprobe und Stoppregel fest.

Quelle: Microsoft Research: Prüfungen vor dem Experiment ↗ · Microsoft Research: Überprüfung laufender Experimente ↗

Das tatsächliche Besuchererlebnis prüfen

Prüfen Sie Kontroll- und Testvariante auf üblichen mobilen Bildschirmbreiten, auch mit langen Produktnamen und ausverkauften Größen. Verifizieren Sie tatsächliche Zuweisung, Exposition und Kaufereignisse. Prüfen Sie, ob wiederkehrende Besucher in derselben Variante bleiben, und berücksichtigen Sie gleichzeitig laufende Experimente.

Benennen Sie eine Person für die Rücknahme der Änderung und definieren Sie betriebliche Abbruchkriterien. Ein fehlerhaftes Erlebnis zu stoppen ist eine andere Entscheidung als aufgrund einer vielversprechenden Zwischenansicht einen statistischen Gewinner auszurufen. Dokumentieren Sie den Grund jedes Eingriffs, damit der Abschlussbericht Änderungen während des Tests nachvollziehbar macht.

Unsicherheit und nächste Schritte festhalten

Berichten Sie Stichprobe, geschätzten Effekt, Unsicherheit, Qualitätskriterien und die Erfüllung der vereinbarten Entscheidungsbedingungen. Ein laufender Test hat noch kein abschließendes Ergebnis. Bleibt das Ergebnis unentschieden, benennen Sie die offene Frage, statt die günstigste Zahl als Erfolg darzustellen.

Ergänzen Sie einen konkreten Vorschlag: übernehmen, überarbeiten, stoppen oder die laut ursprünglichem Plan noch benötigten Daten erheben. Tragen Sie relevante Retourenergebnisse später nach. Der CRO Agent kann Untersuchung und Vorschlag vorbereiten helfen; das verantwortliche Team prüft die Methode und genehmigt die Umsetzung.

ANSCHAULICHES BEISPIEL

Ein Testbriefing für die Größentabelle

Beispiel: Teilnahmeberechtigte mobile Besucher sehen entweder die bestehende Größenauswahl oder eine Variante mit einem deutlicheren Link zur Größenberatung. Das Team prüft Zuweisung und Exposition, legt primäre Zielgröße und Stoppmethode vorher fest und überwacht die technische Leistung. Mehr Klicks auf die Größenberatung sind allein kein Erfolgskriterium. Spätere Kauf- und Retourendaten ergänzen die wirtschaftliche Bewertung.

In der Praxis anwenden

  1. Belege, vermuteten Wirkmechanismus und Zielgruppe dokumentieren.
  2. Primäre Zielgröße, Qualitätsgrenzen und Analysemethode vereinbaren.
  3. Beide Varianten, Zuweisung und Ereigniserfassung prüfen.
  4. Unsicherheit berichten und die vereinbarte Entscheidungsregel anwenden.

Referenzmaterial

Plattformdokumentation am 3. Oktober 2026 geprüft. Beispiele und Checklisten sind redaktionelle Illustrationen von Faccelerate.

Fragen zu diesem Ansatz?

Sollte ein Test abgebrochen werden, wenn das Dashboard zum ersten Mal ein positives Ergebnis anzeigt?

Halten Sie sich an die vorab vereinbarte Analysemethode und Stoppregel. Bei einem Test mit festgelegtem Auswertungszeitpunkt können wiederholte Zwischenprüfungen und ein Abbruch beim ersten günstigen Ergebnis zu irreführenden Schlussfolgerungen führen. Technische oder betriebliche Probleme können einen davon getrennten Eingriff erfordern.