Przejdź do treści

Reklama
Reklama niedostępna offline
Treść strony pozostaje dostępna.

Kalkulator testu A/B

Podaj liczbę sukcesów i wszystkich użytkowników dla wariantów A oraz B. Wynik porównuje dwie niezależne proporcje.

Dwustronna wartość p: —

Ustaw pola powyżej — wynik policzy się na tej stronie.

Konwersja A
—
Konwersja B
—
Różnica B − A
—
Uplift względny
—
Statystyka z
—
Dolna granica różnicy
—
Górna granica różnicy
—
Istotny na wybranym poziomie (1 = tak)
—

Konwersje wariantów

Słupki pokazują obserwowany udział sukcesów w wariancie A i B.

Dane wariantów

Wariant Sukcesy Liczebność Konwersja
Ustaw pola powyżej — wynik policzy się na tej stronie.
Co wynika z tych liczb?
  • Przedział różnicy obejmujący zero oznacza brak rozstrzygnięcia na wybranym poziomie ufności.
  • Uplift względny może wyglądać duży przy małej wartości bazowej, dlatego raportuj też różnicę bezwzględną.

Przybliżenie normalne jest przeznaczone dla niezależnych grup i dostatecznie dużych liczebności. Nie obsługuje danych sparowanych, wielokrotnego podglądania ani korekty wielu metryk.

Jak korzystać z tej strony?
  1. Wpisz sukcesy i liczebności A oraz B.
  2. Wybierz poziom ufności ustalony przed analizą.
  3. Odczytaj różnicę, przedział i wartość p.

Czego ta strona nie robi: Przybliżenie normalne jest przeznaczone dla niezależnych grup i dostatecznie dużych liczebności. Nie obsługuje danych sparowanych, wielokrotnego podglądania ani korekty wielu metryk.

Gdzie doczytać

Teoria — jak działa test A/B dwóch proporcji?

Kalkulator porównuje liczbę sukcesów i wszystkich użytkowników w wariantach A i B jako test dwóch niezależnych proporcji. Sprawdza hipotezę, że prawdopodobieństwo sukcesu jest w obu wariantach takie samo — wartość p opisuje zgodność danych z tą hipotezą, a przedział ufności pokazuje zakres wiarygodnych różnic B minus A. Mniejsza wartość p nie oznacza większego efektu, bo zależy także od liczebności próby; wielkość efektu pokazuje różnica bezwzględna między wariantami.

Najczęstsze pytania

Czy mniejsza wartość p oznacza większy efekt?
Nie. Wartość p zależy także od liczebności. Wielkość efektu pokazują różnica bezwzględna, uplift i przedział ufności.
Czy mogę zakończyć test, gdy p spadnie poniżej 0,05?
Ciągłe podglądanie bez zaplanowanej metody zwiększa ryzyko fałszywego alarmu. Ustal czas lub liczebność z góry albo użyj analizy sekwencyjnej.

Zobacz także

← Wszystkie kalkulatory

Reklama
Reklama niedostępna offline
Treść strony pozostaje dostępna.
Aplikacja offline i powiadomienia po losowaniu

Moje kupony

Zestawy zapisane tylko w tej przeglądarce. Liczby pokazujemy dokładnie tak, jak je zapisano; to nie jest kupon.

Otwórz centrum Moje kupony
Odtwórz z podglądem

Odtwarzanie w centrum: najpierw podgląd pliku i Twoje potwierdzenie. Obsługujemy stare kopie oraz pełną kopię zestawów i dziennika. Nic nie wysyłamy.