Przedziały ufności w publikacjach naukowych - istotność statystyczna

Procesy stochastyczne. Sposoby racjonalizowania wielkich ilości informacji. Matematyka w naukach społecznych.
matemix
Użytkownik
Użytkownik
Posty: 465
Rejestracja: 10 cze 2008, o 19:38
Płeć: Mężczyzna
Lokalizacja: Wrocław
Podziękował: 12 razy
Pomógł: 1 raz

Przedziały ufności w publikacjach naukowych - istotność statystyczna

Post autor: matemix »

Czytam poradnik:

Kod: Zaznacz cały

sphweb.bumc.bu.edu/otlt/mph-modules/ep/ep713_randomerror/ep713_randomerror6.html
I z tego co rozumiem, to wynik jest istotny statystycznie, gdy przedział ufności nie zawiera jedynki. Z tego by wynikało, że wszystkie wyniki tutaj w podpunkcie A:

Kod: Zaznacz cały

wwwnc.cdc.gov/eid/article/26/5/19-0994-f2
Są nieistotne statystycznie. Czy dobrze to rozumiem? Mamy średnio redukcję o 22%, ale jest to wynik nieistotny statystycznie, zgadza się?
matemix
Użytkownik
Użytkownik
Posty: 465
Rejestracja: 10 cze 2008, o 19:38
Płeć: Mężczyzna
Lokalizacja: Wrocław
Podziękował: 12 razy
Pomógł: 1 raz

Re: Przedziały ufności w publikacjach naukowych - istotność statystyczna

Post autor: matemix »

Tyle, że przykładzie na tamtej stronie jest przypadek risk difference \(\displaystyle{ 0.75}\), \(\displaystyle{ 95 \% }\) confidence, \(\displaystyle{ interval = (0.41,1.16)}\), jako istotny statystycznie, co przeczy temu co napisali wcześniej. Gdyby podawano po prosu p-value nie byłoby takiego problemu. To nie ma dla mnie jak na razie sensu.

Znalazłem formułę na obliczanie statystycznej istotności. Do dolnej granicy przedziału dodajemy szacowaną wartość, jeśli obejmie górną granicę, to wynik jest istotny statystycznie. Ale kompletnie nie wiem, czy ma to sens i dlaczego. W zestawieniu A żaden wynik okazuje się nie być istotny statystycznie, ale fixed effect model (cokolwiek to jest) daje risk ratio istotny statystycznie. Jakim cudem, skoro wszystkie wyniki są nieistotne statystycznie?
matemix
Użytkownik
Użytkownik
Posty: 465
Rejestracja: 10 cze 2008, o 19:38
Płeć: Mężczyzna
Lokalizacja: Wrocław
Podziękował: 12 razy
Pomógł: 1 raz

Re: Przedziały ufności w publikacjach naukowych - istotność statystyczna

Post autor: matemix »

Ok, już chyba wiem o co chodzi. Wracając do końcowego testu ze strony:

Kod: Zaznacz cały

sphweb.bumc.bu.edu/otlt/mph-modules/ep/ep713_randomerror/EP713_RandomError6.html
Relative Risk \(\displaystyle{ = 0.68}\); \(\displaystyle{ 95\%}\) confidence_interval \(\displaystyle{ = (0.27,1.01)}\). \(\displaystyle{ 95 \% }\) przedział ufności oznacza, że na \(\displaystyle{ 95\%}\) szacowana wartość jest w przedziale \(\displaystyle{ (0.27,1.01)}\) (innymi słowy szanse, że się mylimy są jak \(\displaystyle{ 1:20}\)). Wartość \(\displaystyle{ 0.68}\) to zdaje się mediana, choć pewnie może być to też średnia. Względne ryzyko jest niekonkluzywne, jeżeli będzie wynosić \(\displaystyle{ 1}\), a przedział ufności wskazuje, że może to być równie dobrze \(\displaystyle{ 1}\). Dlatego nie są to wyniki istotne statystycznie.

Relative Difference \(\displaystyle{ = 0.75}\); \(\displaystyle{ 95\%}\) confidence interval \(\displaystyle{ = (0.41,1.16)}\). Ten wynik jest istotny statystycznie. Nieistotny byłby, gdyby przedział ufności obejmował relatywną różnice wynoszącą zero (o ile dobrze rozumiem, że oblicza się to jako różnicę, a nie stosunek dwóch wielkości).

Relative Risk \(\displaystyle{ = 0.45}\); \(\displaystyle{ 95\%}\) confidence interval \(\displaystyle{ = (0.27,0.63)}\). Ten wynik jest istotny statystycznie, bo nie obejmuje \(\displaystyle{ 1}\).

Relative Ratio \(\displaystyle{ = 2.51}\); \(\displaystyle{ 95\%}\) confidence interval \(\displaystyle{ = (1.04,3.28)}\). Ten wynik jest istotny statystycznie, bo również nie obejmuje \(\displaystyle{ 1}\).

Risk Ratio \(\displaystyle{ = 3.43}\); \(\displaystyle{ 95\%}\) confidence interval \(\displaystyle{ = (0.98,5.92)}\). Ten wynik jest nieistotny statystycznie, bo stosunek ryzyka może wynosić jeden, wówczas efekt byłby zerowy, a wnioski niekonkluzywne.

I wracając do publikacji:

Kod: Zaznacz cały

wwwnc.cdc.gov/eid/article/26/5/19-0994-f2
Ponieważ mówimy o risk ratio, wszystkie wyniki są nieistotne statystycznie, bo przedziały ufności zawierają jedynkę, a risk ratio równy jeden nie daje żadnego efektu, więc nie da się tu wyciągnąć konkluzywnych wniosków. To samo tyczy się fixed effect model i wyniku \(\displaystyle{ 0.78}\).
ODPOWIEDZ