Kaj je P-Hacking? | Statistika

P-hacking je izraz, ki se uporablja za opis različnih tehnik, s katerimi lahko raziskovalci povečajo možnost, da v svoji študiji najdejo statistično pomembne rezultate, čeprav ti dejansko niso pomembni. To je oblika manipulacije s podatki, ki lahko privede do objave lažno pozitivnih rezultatov.

Npr.

V študiji, ki primerja učinkovitost dveh različnih fizioterapevtskih posegov pri bolečinah v rami, povezanih z rotatorno manšeto, lahko raziskovalec izvede več analiz podatkov in poroča le o tistih, ki kažejo statistično pomembno razliko med obema posegoma. To je "p-hacking", saj raziskovalec selektivno poroča le o rezultatih, ki potrjujejo njegovo hipotezo, medtem ko ignorira tiste, ki je ne potrjujejo.

Več neprilagojenih primerjav

Drug primer vdiranja v fizioterapevtske raziskave je, ko raziskovalec izvede več primerjav med različnimi intervencijami, vendar teh več primerjav ne prilagodi. Zaradi tega se lahko poveča možnost, da bodo statistično značilni rezultati pridobljeni po naključju, tudi če se intervencije v resnici ne razlikujejo.

S selektivnim odstranjevanjem nekaterih podatkov raziskovalec dejansko "p-hakira" rezultate, saj poveča verjetnost, da bo ugotovil statistično pomembno razliko med obema intervencijama, tudi če ni nobene dejanske razlike. Raziskovalec lahko nato podatke predstavi, kot da gre za pošteno primerjavo, kar lahko privede do netočnih zaključkov in zavede prihodnje raziskave in zdravljenje. To je le eden od načinov za to.

Nenamerno

Pomembno je poudariti, da se lahko vdor v P zgodi po naključju in je lahko posledica raziskovalčevega pomanjkanja statističnega znanja ali pritiska za objavo obetavnih rezultatov. Lahko pa je tudi zavestna izbira z določenim ciljem. Raziskovalci morajo predhodno prijaviti zasnovo študije in analitični načrt, poročati o vseh ugotovitvah in uporabiti ustrezne statistične tehnike za upoštevanje večkratnih primerjav, da bi preprečili vdor p. Za povečanje zaupanja v ugotovitve se lahko uporabijo tudi študije ponovitev in neodvisne ponovitve ugotovitev.

Več o registraciji v predkazenskem postopku

Registracija pred preskušanjem, ki vključuje predložitev izčrpnih podatkov o načrtu raziskave, intervencijah, rezultatih in načrtu analize, je postopek registracije kliničnega preskušanja pred njegovim začetkom. Ta postopek je ključnega pomena za povečanje odprtosti in zmanjšanje pristranskosti v kliničnih raziskavah. Raziskovalci se z javno registracijo študije pred njenim izvajanjem zavežejo k določenim ciljem in postopkom, kar lahko pomaga preprečiti selektivno poročanje o rezultatih in prirejanje podatkov. Registracija pred začetkom preskušanja prav tako olajša dostop do podatkov o trenutnih in zaključenih preskušanjih ter preprečuje odvečna raziskovalna prizadevanja. Registrirane raziskave bodo bolj verjetno objavljene, kar lahko zmanjša pristranskost objave in zagotovi, da so rezultati raziskave na voljo za uporabo v klinični praksi in pri oblikovanju politike. Registracija pred preskušanjem je pomemben korak k zagotavljanju preglednega in strogega izvajanja kliničnih raziskav, kar vodi k zanesljivejšim in uporabnejšim rezultatom.

Gelman, A. in Loken, E. (2019). Vrt vijugastih poti : Zakaj so lahko večkratne primerjave problem, tudi če ne gre za "ribiško ekspedicijo" ali "vdiranje" in je bila raziskovalna hipoteza postavljena vnaprej ∗.

Daniele Fanelli (2012). Negativni rezultati izginjajo iz večine disciplin in držav. , 90(3), 891-904. doi:10.1007/s11192-011-0494-7

Lakens, D. (2019). Vrednost predhodne registracije za psihološko znanost: Konceptualna analiza. 心理学評論, 62(3), 221-230.

Storey, J. D. (2003). Pozitivna stopnja napačnega odkritja: Bayesova razlaga in vrednost q. The annals of statistics, 31(6), 2013-2035.

Wicherts, J. M., Veldkamp, C. L. S., Augusteijn, H. E. M., Bakker, M. in van Aert, R. C. (2016). M., & van Assen, MALM (2016). Stopnje svobode pri načrtovanju, izvajanju, analiziranju in poročanju o psiholoških študijah: Kontrolni seznam za preprečevanje vdora v p-obliko. Frontiers in Psychology, 7.