Was ist dieser A/B-Signifikanzrechner?
Ein kostenloser, browserbasierter Rechner, der Ihnen sagt, ob der Unterschied zwischen zwei Conversion-Raten echt oder nur Rauschen ist. Geben Sie Besucher und Conversions für jede Variante ein, und er berechnet beide Conversion-Raten, den relativen Uplift, den p-Wert, Ihre Konfidenz und ein klares Urteil — signifikant oder nicht — auf dem von Ihnen gewählten Konfidenzniveau. Alles läuft lokal in Ihrem Browser, sodass Ihre Daten nie hochgeladen werden.
Methodik und Annahmen
Wir verwenden einen zweiseitigen z-Test für zwei Anteile mit gepooltem Standardfehler — die Standardmethode zum Vergleich zweier Conversion-Raten. Die z-Statistik ist (RateB − RateA) ÷ gepoolter Standardfehler, und der p-Wert stammt aus der Standardnormalverteilung. Ein Ergebnis gilt als signifikant, wenn der p-Wert unter (1 − Konfidenz) liegt.
- Das Ergebnis jedes Besuchers ist unabhängig (ein neuer Besucher, zufällig zugewiesen).
- Die Stichprobe ist groß genug — eine Faustregel sind ~10+ Erfolge und ~10+ Misserfolge pro Gruppe.
- Schauen Sie nicht wiederholt hinein, um vorzeitig zu stoppen — legen Sie die Stichprobengröße im Voraus fest, um Falsch-Positive zu vermeiden.
So verwenden Sie es
- Geben Sie Besucher und Conversions für Variante A (Kontrolle) und B (Variante) ein.
- Wählen Sie Ihr Konfidenzniveau (90 % / 95 % / 99 %).
- Lesen Sie rechts das Urteil, den Uplift, den p-Wert und die Konfidenz.
Häufige Anwendungsfälle
- Entscheiden, ob eine neue Landingpage die alte wirklich schlägt.
- Einen Test einer E-Mail-Betreffzeile oder eines Anzeigen-Creatives prüfen, bevor er ausgerollt wird.
- Vermeiden, eine Änderung auszuliefern, die nur zufällig besser aussah.
