Reklama i analityka · darmowe narzędzie

Kalkulator testu A/B

Wpisz liczbę użytkowników i konwersji w obu wariantach. Kalkulator sprawdzi, czy różnica jest istotna statystycznie, a przed testem policzy, ilu użytkowników potrzebujesz i ile dni potrwa test.

  • test istotności dwóch proporcji (test z)
  • wartość p i poziom ufności
  • przedział ufności dla różnicy
  • wymagana próba dla minimalnego efektu

Narzędzie działa w Twojej przeglądarce. Wpisane dane nie są wysyłane na serwer.

Jak czytać wynik

Jak czytać wynik testu

Istotność

Wynik jest istotny, gdy wartość p jest mniejsza od przyjętego progu, zwykle 0,05. Oznacza to, że różnica tej wielkości rzadko pojawiałaby się przypadkiem, gdyby warianty działały tak samo.

Przedział ufności

Przedział pokazuje zakres, w którym z dużym prawdopodobieństwem leży prawdziwa różnica współczynników konwersji. Jeśli obejmuje zero, wynik nie jest rozstrzygający.

Wielkość próby

Im mniejszą zmianę chcesz wykryć, tym więcej użytkowników potrzebujesz. Test zakończony przed zebraniem próby często daje fałszywe zwycięstwa.

Co potrafi narzędzie

  • test istotności dwóch proporcji (test z)
  • wartość p i poziom ufności
  • przedział ufności dla różnicy
  • wymagana próba dla minimalnego efektu
  • szacowany czas testu z ruchu dziennego
  • działa w przeglądarce

Pytania

Najczęstsze pytania

Kiedy można zakończyć test A/B?

Po zebraniu zaplanowanej liczby użytkowników w obu wariantach i najlepiej po pełnych tygodniach, żeby uwzględnić różnice między dniami. Sprawdzanie wyniku codziennie i kończenie przy pierwszej istotności zawyża liczbę fałszywych wyników.

Jaki poziom ufności wybrać?

Najczęściej stosuje się 95%, czyli próg wartości p 0,05. Przy decyzjach o dużym koszcie warto przyjąć 99%, ale wymaga to większej próby.

Czy kalkulator nadaje się do testów reklam?

Tak, jeśli porównujesz proporcje, np. kliknięcia do wyświetleń albo konwersje do kliknięć. Do porównywania średnich wartości zamówień potrzebny jest inny test.

Bezpłatny audyt

Wynik pokazał błędy? Sprawdzimy całą witrynę

Narzędzie analizuje jedną stronę albo jeden plik. Audyt icomSEO obejmuje wszystkie podstrony, dane z Google Search Console i plan poprawek z kolejnością wdrożenia.

Partnerzy i organizacje

Zadzwoń