Hva Definerer betydning i Statistisk analyse?

Når du leser om statistisk analyse av data, vil du ofte se ord som "statistisk signifikant" eller bare "betydelig". Noen ganger vil du også se en setning som "p <0,05". Hva betyr disse? Hvordan er de fast bestemt på? Er de viktige? Er et resultat som er statistisk signifikant nødvendigvis er replikerbar eller viktig?

Type 1 og type 2 feil

Når du analyserer et utvalg av data, du vanligvis ønsker å gjøre slutninger til en større populasjon. For eksempel, hvis vi ønsker å se om å ta et bestemt legemiddel senker kolesterolet, vil vi gi stoffet til et utvalg av personer, og måle kolesterol. Men vi vil være interessert i å dedusere resultatene til en større gruppe mennesker.

Etter vår analyse, ville vi si enten "dette stoffet senker kolesterolet" eller "det er ingen god dokumentasjon på at dette stoffet senker kolesterolet." Hvis vi sier den første og er galt, er at en type 1 feil. Hvis vi si den andre og er feil, er det en type 2-feil.

P-verdier

P-verdien er sjansen for å gjøre en type 1 feil. Det er, er det mulighet for å si noe som skjer (for eksempel "dette stoffet senker kolesterolet") når, hvis stoffet ble gitt til hele befolkningen, ville det ikke være noen effekt. Det er ikke sannsynlig at resultatet skjedd "tilfeldig"; det er sannsynligheten for at et resultat denne ekstreme eller mer ekstrem kunne ha skjedd ved en tilfeldighet hvis det ikke var noen effekt i befolkningen.

Statistisk signifikans, Effect Size og utvalgsstørrelse

Den statistiske signifikans av et resultat er bestemt av to ting - størrelsen av effekt og størrelsen på prøven. I en meget stor prøve, kan selv en liten effekt (for eksempel å senke kolesterol ved to punkter) være statistisk signifikant. I en meget liten prøve, ville selv en stor effekt (for eksempel å senke kolesterol ved 100 poeng) ikke være statistisk signifikant.

Statistisk signifikans og praktisk betydning

Den praktiske betydning av et resultat er bare noe relatert til dens statistisk signifikans. Anta for eksempel at en kolesterol medikament blir testet på et stort utvalg av 10.000 mennesker. Det er funnet at stoffet senker kolesterol med i gjennomsnitt to punkter. P-verdien er funnet å være 0,008, noe som ville bli ansett som statistisk signifikant. Men du og legen din kan føle at å senke kolesterolet ved to punkter er uten verdi.