Darmowy kalkulator istotności testu A/B
Sprawdź w kilka sekund, czy wynik Twojego testu A/B jest istotny statystycznie. Wpisz odwiedzających i konwersje dla obu wariantów, żeby zobaczyć zwycięzcę, wzrost, wartość p i potrzebną wielkość próby.
Poziom ufności
Pewność
0.0%
Czekam na daneWpisz odwiedzających i konwersje dla obu wariantów, żeby zobaczyć werdykt.
- Kontrolny (A) współczynnik konwersji
- 0.00%
- Wariant (B) współczynnik konwersji
- 0.00%
- Wzrost
- --
- Wartość p
- --
- Wielkość próby
- --
Wskazówka. Nie zatrzymuj testu w chwili, gdy pewność przekroczy 95%. Ustal wielkość próby z góry i pozwól testowi działać. Inaczej łatwo ogłosisz zwycięzcę, który okaże się fałszywym pozytywem.
Jak to działa
Jak sprawdzić istotność testu A/B w 3 krokach
Uzyskaj jasny, rzetelny statystycznie werdykt dla swojego testu A/B w niecałą minutę, bez arkuszy kalkulacyjnych i bez rejestracji.
- 01
Wpisz dane wariantu kontrolnego
Dodaj łączną liczbę odwiedzających i konwersji dla wariantu A, czyli oryginalnej wersji, z którą porównujesz.
- 02
Wpisz dane wariantu testowego
Dodaj odwiedzających i konwersje dla wariantu B, czyli nowej wersji. Współczynniki konwersji aktualizują się na bieżąco.
- 03
Odczytaj werdykt
Sprawdź, czy wynik jest istotny, poznaj wzrost, wartość p i pewność oraz szacunkową liczbę odwiedzających, których Ci brakuje, jeśli wynik nie jest jeszcze istotny.
Dlaczego to ważne
Dlaczego marketerzy sprawdzają istotność
Sam wyższy współczynnik konwersji nie oznacza zwycięzcy. Użyj porządnego testu istotności, żeby wiedzieć, kiedy zakończyć test, kiedy go kontynuować, a kiedy wynik to tylko szum.
Wiedz, kiedy zakończyć test
Wskazuj zwycięzców z prawdziwą pewnością zamiast zgadywać i nie porzucaj wariantów, które działają.
Unikaj fałszywych pozytywów
Nie pozwól, by podglądanie wyników kosztowało Cię pieniądze. Prawidłowa wartość p mówi Ci, kiedy różnica jest prawdziwa.
Zaplanuj kolejny test
Podpowiedź o wielkości próby szacuje, ilu odwiedzających potrzebuje każdy wariant, przy mocy testu 80%, by potwierdzić widoczną różnicę. Użyj jej, by zaplanować wielkość kolejnego testu przed jego startem.
Przejrzystsze raporty
Udostępnij zespołowi link do wyniku jednym kliknięciem, żeby wszyscy patrzyli na te same liczby z tą samą pewnością.
Zastosowania
Gdzie zespoły korzystają z kalkulatora testów A/B
Od stron docelowych po kreacje reklamowe: tak marketerzy wplatają szybkie sprawdzenie istotności w każdy eksperyment, który prowadzą.
Testy stron docelowych
Porównaj dwie wersje strony docelowej, żeby wiedzieć, który nagłówek, sekcja hero czy CTA naprawdę zmienia współczynnik konwersji.
Facebook i Meta Ads
Wybieraj między dwiema kreacjami lub grupami odbiorców w oparciu o prawdziwą statystykę, a nie etykiety w Ads Managerze.
Testy tekstów w Google Ads
Porównaj dwa warianty elastycznej reklamy w wyszukiwarce, żeby potwierdzić, że nowy nagłówek naprawdę wygrywa z wersją kontrolną, zanim zwiększysz budżet.
Testy tematów e-maili
Wyślij dwa tematy do małej części listy i z pewnością wskaż zwycięzcę przed wysyłką do wszystkich.
Testy ścieżki zakupowej
Upewnij się, że nowy krok zamówienia, odznaka zaufania czy upsell naprawdę poprawia odsetek ukończonych zakupów, a nie jest tylko szumem.
Eksperymenty na stronie cennika
Przeprowadź czysty test dwóch progów cenowych lub układów i decyduj na podstawie rejestracji, a nie przeczucia.
FAQ
Pytania o kalkulator istotności testu A/B.
Wszystkiego, czego tu nie ma, szukaj w Centrum pomocy albo zapytaj nas.
Najczęstsze pytania
Czym jest istotność statystyczna w testach A/B?
Istotność statystyczna mówi, na ile możesz być pewny, że różnica między dwoma wariantami jest prawdziwa, a nie wynikiem losowych wahań. Powszechna zasada: ogłaszaj zwycięzcę dopiero przy 95% pewności lub wyżej, czyli gdy prawdopodobieństwo przypadku spada poniżej 5%.
Czym jest wartość p?
Wartość p to prawdopodobieństwo zaobserwowania Twojego wyniku (lub jeszcze bardziej skrajnego), gdyby w rzeczywistości nie było żadnej różnicy między wariantami. Im niższa wartość p, tym mocniejszy dowód, że różnica jest realna. Wartość p równa 0,05 odpowiada 95% pewności.
Jakiego poziomu ufności użyć?
Większość marketerów pracuje na 95% ufności, godząc się na 5% ryzyka fałszywie pozytywnego wyniku. Wybierz 99%, gdy stawka jest wysoka (na przykład wdrożenie zmiany na cały płatny ruch), a 90% tylko przy wczesnych eksperymentach o niskim ryzyku.
Ilu odwiedzających potrzebuję do testu A/B?
To zależy od Twojego bazowego współczynnika konwersji i wielkości wzrostu, który chcesz wykryć. Z grubsza: małe wzrosty (poniżej 5%) wymagają dziesiątek tysięcy odwiedzających na wariant, a większe (od 20% w górę) da się potwierdzić na kilku tysiącach. Kalkulator szacuje, ilu jeszcze odwiedzających potrzebuje każdy wariant, by potwierdzić widoczną różnicę, przy mocy testu 80%.
Czym jest wzrost (lift) w teście A/B?
Wzrost to względna różnica procentowa między współczynnikami konwersji obu wariantów. Jeśli wariant A konwertuje na poziomie 3%, a wariant B 4,5%, wzrost B nad A wynosi 50%. To właśnie wzrostem kierujesz się przy decyzji, czy zmianę warto wdrożyć.
Dlaczego mój test nie jest istotny, mimo że wariant B wygrywa?
Sam wyższy współczynnik konwersji nie wystarczy. Potrzebujesz tylu danych, by różnica nie dała się łatwo wytłumaczyć przypadkiem. Im mniejszy wzrost, tym więcej odwiedzających. Przerwanie testu za wcześnie grozi wdrożeniem zmiany, która była tylko szumem.
Czym jest problem podglądania (peeking)?
Podglądanie to ciągłe sprawdzanie wyników i zatrzymywanie testu w momencie, gdy pewność przekroczy 95%. Taka praktyka drastycznie zwiększa liczbę fałszywych pozytywów. Zamiast tego ustal potrzebną wielkość próby z góry, a wynik sprawdź raz, na koniec.
Czy ten kalkulator działa dla Facebook, Google lub TikTok Ads?
Tak. Istotność to uniwersalna statystyka, więc kalkulator zadziała przy każdym teście A/B, w którym mierzysz odwiedzających (albo wyświetlenia, kliknięcia, wysyłki) i konwersje. Wpisz liczby z Meta Ads, Google Ads, TikTok Ads, platform mailingowych albo analityki swojej strony docelowej.
Czy ten kalkulator testów A/B jest darmowy?
Tak. Kalkulator istotności testów A/B jest w 100% darmowy: bez rejestracji, bez limitów i bez podawania e-maila. Przeprowadzaj tyle testów, ile potrzebujesz, prywatnie lub komercyjnie.
Czy moje dane są gdzieś zapisywane?
Nie. Wszystkie obliczenia odbywają się w całości w Twojej przeglądarce. Liczby odwiedzających i konwersji nigdy nie opuszczają Twojego urządzenia i nigdy nie trafiają na nasze serwery.
Testuj A/B tę stronę docelową, którą Twoi odwiedzający naprawdę widzą
Największe wygrane w testach A/B biorą się z testowania strony, na którą trafia Twój płatny ruch. Z LanderLab zbudujesz, przetestujesz i opublikujesz strony docelowe, które konwertują, a wyniki wrzucisz z powrotem do tego kalkulatora.