Thema: product
-
Ein A/B-Test auswerten: feste Zeithorizonte, Zwischenschauen und multiple Vergleiche
Zwei Gewohnheiten machen aus einem A/B-Test unbemerkt einen Zufallsgenerator: das Abbrechen, sobald der p-Wert erstmals unter die Schwelle fällt, und das Testen vieler Kennzahlen oder Segmente, bis eines davon „gewinnt“. Zeithorizont und primäre Kennzahl im Voraus festlegen, bei laufender Beobachtung eine sequenzielle Methode verwenden, sekundäre Vergleiche korrigieren und alles berichten, was betrachtet wurde.
Maschinenlesbar: JSON