Ce este P-Hacking? | Statistici

P-hacking este un termen utilizat pentru a descrie diverse tehnici pe care cercetătorii le pot utiliza pentru a crește șansele de a găsi rezultate semnificative din punct de vedere statistic în studiul lor, chiar dacă rezultatele nu sunt semnificative în realitate. Aceasta este o formă de manipulare a datelor care poate duce la publicarea de rezultate fals pozitive.

Eg.

Într-un studiu care compară eficacitatea a două intervenții diferite de fizioterapie pentru durerile de umăr legate de manșonul rotatorilor, un cercetător poate efectua analize multiple ale datelor, raportându-le doar pe cele care arată o diferență semnificativă din punct de vedere statistic între cele două intervenții. Acesta este un p-hacking, deoarece cercetătorul raportează selectiv doar rezultatele care susțin ipoteza sa, ignorându-le pe cele care nu o susțin.

Comparații multiple neajustate

Un alt exemplu de p-hacking în cercetarea în fizioterapie este atunci când un cercetător efectuează comparații multiple între diferite intervenții, dar nu ajustează aceste comparații multiple. Acest lucru poate duce la o creștere a șanselor de a găsi rezultate semnificative din punct de vedere statistic din întâmplare, chiar dacă intervențiile nu sunt cu adevărat diferite.

Prin eliminarea selectivă a unora dintre date, cercetătorul "p-hacking" efectiv rezultatele, deoarece crește probabilitatea de a găsi o diferență semnificativă statistic între cele două intervenții, chiar dacă nu există nicio diferență reală. Cercetătorul poate prezenta apoi datele ca și cum ar fi o comparație echitabilă, ceea ce poate duce la concluzii inexacte și poate induce în eroare cercetările și tratamentele viitoare. Aceasta este doar una dintre modalitățile de a face acest lucru.

Neintenționat

Este esențial să rețineți că P-hacking se poate întâmpla accidental și poate rezulta din lipsa de cunoștințe statistice a unui cercetător sau din presiunea de a publica rezultate promițătoare. Cu toate acestea, poate fi, de asemenea, o alegere făcută în mod conștient, cu un scop în minte. Cercetătorii ar trebui să își înregistreze în prealabil proiectul de studiu și planul analitic, să raporteze toate constatările și să aplice tehnicile statistice adecvate pentru a ține cont de comparațiile multiple, în scopul de a preveni p-hacking-ul. Pentru a spori încrederea în constatări, se pot utiliza, de asemenea, studii de replicare și replicarea independentă a constatărilor.

Mai multe informații privind înregistrarea înainte de proces

Înregistrarea înainte de începerea studiului, care include transmiterea de detalii complete privind proiectul de cercetare, intervențiile, rezultatele și planul de analiză, este procesul de înregistrare a unui studiu clinic înainte de începerea acestuia. Această procedură este considerată esențială pentru sporirea deschiderii și minimizarea prejudecăților în cercetarea clinică. Cercetătorii se angajează să respecte un set de obiective și proceduri prin înregistrarea publică a unui studiu înainte ca acesta să fie efectuat, ceea ce poate contribui la prevenirea raportării selective a rezultatelor și a falsificării datelor. Înregistrarea înainte de proces facilitează, de asemenea, accesul la datele privind studiile în curs și finalizate și previne eforturile de cercetare redundante. Studiile înregistrate au mai multe șanse de a fi publicate, ceea ce poate reduce prejudecățile de publicare și poate garanta că rezultatele studiului sunt disponibile pentru a fi utilizate în practica clinică și în elaborarea politicilor. Înregistrarea preliminară este un pas important pentru a garanta că cercetarea clinică se desfășoară într-un mod transparent și riguros, ceea ce conduce la rezultate mai fiabile și mai utile.

Gelman, A., & Loken, E. (2019). Grădina cărărilor bifurcate : De ce comparațiile multiple pot fi o problemă, chiar și atunci când nu există o "expediție de pescuit" sau "p-hacking", iar ipoteza cercetării a fost formulată din timp ∗.

Daniele Fanelli (2012). Rezultatele negative dispar din majoritatea disciplinelor și țărilor. , 90(3), 891-904. doi:10.1007/s11192-011-0494-7

Lakens, D. (2019). Valoarea preînregistrării pentru științele psihologice: O analiză conceptuală. 心理学評論, 62(3), 221-230.

Storey, J. D. (2003). Rata de descoperire falsă pozitivă: o interpretare bayesiană și valoarea q. The annals of statistics, 31(6), 2013-2035.

Wicherts, J. M., Veldkamp, C. L. S., Augusteijn, H. E. M., Bakker, M., & van Aert, R. C. (2016). M., & van Assen, MALM (2016). Gradele de libertate în planificarea, desfășurarea, analizarea și raportarea studiilor psihologice: O listă de verificare pentru a evita p-hacking-ul. Frontiere în psihologie, 7.