Matematyka.pl

Hej,

Mam pytanie dotyczące testowania hipotez w testach A/B. Chciałbym widzieć jak krok po kroku mogę obliczyć prawdopodobieństwo wygranej określonego wariantu. Chcę liczyć istotność statystyczną dla metryki "Średni przychód na użytkownika". Mam dostęp do wszystkich danych składowych. Podam dwa przykłady testów.

Test I (wariant A/B):

Wariant I: 550 000 tyś przychodu / 84 tyś użytkowników
Wariant II: 530 000 tyś przychodu / 83 tyś użytkowników


Test II (wariant A/B/C/D):

Wariant I: 550 000 tyś przychodu / 84 tyś użytkowników
Wariant II: 530 000 tyś przychodu / 83 tyś użytkowników
Wariant III: 580 000 tyś przychodu / 87 tyś użytkowników
Wariant IV: 510 000 tyś przychodu / 79 tyś użytkowników

Chciałbym wiedzieć jak mogę policzyć istotność statystyczną, która przy przekroczeniu p = 0.95 wskaże czy któryś wariant okazał się lepszy czy jeszcze żaden z nich nie uzyskał istotności.Oczywiście mam inne metryki typu ilość konwersji, wartości poszczególnych konwersji, średnia wartość koszyka itp