Planowanie testu A/B — liczebność, MDE i czas
Podaj konwersję bazową, oczekiwany wzrost, moc, poziom ufności i dzienny ruch.
Planowany i wykrywalny efekt
| Scenariusz | Bazowa | Docelowa | n na wariant |
|---|---|---|---|
| Ustaw pola powyżej — wynik policzy się na tej stronie. | |||
Jak korzystać z tej strony?
- Wpisz bazową konwersję jako liczbę od 0 do 1.
- Podaj względny efekt, który ma znaczenie biznesowe.
- Odczytaj próbę, MDE i czas, a następnie ustal pełny harmonogram.
Czego ta strona nie robi: Wzór używa przybliżenia normalnego, równego podziału ruchu i niezależnych użytkowników. Nie uwzględnia wielokrotnego podglądania, klastrów ani wielu metryk.
Gdzie doczytać
Plan oblicza liczbę obserwacji potrzebną do porównania dwóch niezależnych proporcji testem dwustronnym. MDE pokazuje najmniejszy względny wzrost, który podana dostępna próba wykryje z wybraną mocą.
Czas jest ilorazem łącznej próby i ruchu A+B, zaokrąglonym w górę. W praktyce eksperyment powinien obejmować pełne cykle tygodniowe i wcześniej ustalony horyzont.
Najczęstsze pytania
Czy 0,1 oznacza 10%?
Tak. Konwersje i wzrost względny wpisujesz jako ułamki.
Czy mogę zakończyć test wcześniej?
Tylko według wcześniej zaplanowanej metody sekwencyjnej. Zwykłe ciągłe podglądanie zwiększa ryzyko fałszywego wyniku.
Zobacz także
ANOVA z powtarzanymi pomiarami — kalkulator
Porównaj średnie od dwóch do czterech warunków mierzonych u tych samych osób.
Analiza czynnikowa — kalkulator ładunków
Wyodrębnij od jednego do trzech czynników z macierzy korelacji i sprawdź ładunki, wspólności oraz swoistości.
Centralne twierdzenie graniczne — symulator
Losuj próby z własnej populacji i zobacz rozkład ich średnich oraz błąd standardowy.