Test badający istotność statystyczną.
Załóżmy, że mamy test A/B, dwa warianty, dwie możliwe klasy tj “kliknął” lub “nie kliknął”. Możemy ułożyć tabelkę jak poniżej:
| wariant A | wariant B | sum | |
|---|---|---|---|
| klik | a + c | ||
| nie-klik | b + d | ||
| sum | a + b | c + d | a + b + c + d = n |
Wrzucamy wszystkie kliki i nie-kliki z obu wariantów do jednego wora i mieszamy. Losujemy eventów z wora (bez zwracania). Jakie jest prawdopodobieństwo, że wśród nich będzie dokładnie klików?
Test ten jest dokładny w przeciwieństwie to chi-squared test, tzn. dla małej liczby danych lepiej używać testu Fishera.