Przejdź do treści

Reklama

Kalkulator testu A/B

Podaj liczbę sukcesów i wszystkich użytkowników dla wariantów A oraz B. Wynik porównuje dwie niezależne proporcje.

Dwustronna wartość p: —

Ustaw pola powyżej — wynik policzy się na tej stronie.

Konwersja A
—
Konwersja B
—
Różnica B − A
—
Uplift względny
—
Statystyka z
—
Dolna granica różnicy
—
Górna granica różnicy
—
Istotny na wybranym poziomie (1 = tak)
—

Konwersje wariantów

Słupki pokazują obserwowany udział sukcesów w wariancie A i B.

Dane wariantów

Wariant Sukcesy Liczebność Konwersja
Ustaw pola powyżej — wynik policzy się na tej stronie.
Co wynika z tych liczb?
  • Przedział różnicy obejmujący zero oznacza brak rozstrzygnięcia na wybranym poziomie ufności.
  • Uplift względny może wyglądać duży przy małej wartości bazowej, dlatego raportuj też różnicę bezwzględną.

Przybliżenie normalne jest przeznaczone dla niezależnych grup i dostatecznie dużych liczebności. Nie obsługuje danych sparowanych, wielokrotnego podglądania ani korekty wielu metryk.

Jak korzystać z tej strony?
  1. Wpisz sukcesy i liczebności A oraz B.
  2. Wybierz poziom ufności ustalony przed analizą.
  3. Odczytaj różnicę, przedział i wartość p.

Czego ta strona nie robi: Przybliżenie normalne jest przeznaczone dla niezależnych grup i dostatecznie dużych liczebności. Nie obsługuje danych sparowanych, wielokrotnego podglądania ani korekty wielu metryk.

Gdzie doczytać

Test dwóch proporcji sprawdza hipotezę, że prawdopodobieństwo sukcesu w A i B jest takie samo. Wartość p opisuje zgodność danych z tą hipotezą, a przedział ufności pokazuje zakres wiarygodnych różnic B − A.

Istotność statystyczna nie mówi, czy efekt ma znaczenie biznesowe. Oceniaj też wielkość różnicy, koszt, czas eksperymentu i wcześniej ustalony miernik.

Najczęstsze pytania

Czy mniejsza wartość p oznacza większy efekt?

Nie. Wartość p zależy także od liczebności. Wielkość efektu pokazują różnica bezwzględna, uplift i przedział ufności.

Czy mogę zakończyć test, gdy p spadnie poniżej 0,05?

Ciągłe podglądanie bez zaplanowanej metody zwiększa ryzyko fałszywego alarmu. Ustal czas lub liczebność z góry albo użyj analizy sekwencyjnej.

Zobacz także

← Wszystkie kalkulatory

Reklama
Aplikacja offline i powiadomienia po losowaniu

Moje kupony

Zestawy zapisane tylko w tej przeglądarce. Liczby pokazujemy dokładnie tak, jak je zapisano; to nie jest kupon.

Otwórz centrum Moje kupony
Odtwórz z podglądem

Odtwarzanie w centrum: najpierw podgląd pliku i Twoje potwierdzenie. Obsługujemy stare kopie oraz pełną kopię zestawów i dziennika. Nic nie wysyłamy.