Che cos'è questo calcolatore di significatività A/B?
Un calcolatore gratuito basato su browser che ti dice se la differenza tra due tassi di conversione è reale o solo rumore. Inserisci visitatori e conversioni per ogni variante e calcola entrambi i tassi di conversione, l'incremento relativo, il p-value, la tua confidenza e un verdetto chiaro — significativo o no — al livello di confidenza che scegli. Tutto viene eseguito localmente nel tuo browser, quindi i tuoi dati non vengono mai caricati.
Metodologia e ipotesi
Usiamo un test z su due proporzioni a due code con errore standard combinato — il metodo standard per confrontare due tassi di conversione. La statistica z è (tassoB − tassoA) ÷ errore standard combinato e il p-value deriva dalla distribuzione normale standard. Un risultato viene considerato significativo quando il p-value è inferiore a (1 − confidenza).
- L'esito di ogni visitatore è indipendente (un nuovo visitatore, assegnato in modo casuale).
- Il campione è abbastanza grande — una regola pratica è ~10+ successi e ~10+ insuccessi per gruppo.
- Non sbirciare ripetutamente per fermarti in anticipo — decidi la dimensione del campione in anticipo per evitare falsi positivi.
Come si usa
- Inserisci visitatori e conversioni per la variante A (controllo) e B (variante).
- Scegli il tuo livello di confidenza (90% / 95% / 99%).
- Leggi il verdetto, l'incremento, il p-value e la confidenza a destra.
Casi d'uso comuni
- Decidere se una nuova landing page batte davvero quella vecchia.
- Verificare un test sull'oggetto di un'email o su una creatività pubblicitaria prima di lanciarlo.
- Evitare di rilasciare una modifica che sembrava migliore solo per caso.
