Istraživanje "okretanja" u znanstvenim časopisima
Nedavno istraživanje istraživalo je "okretanje" u istraživačkim radovima iz psihijatrije i psihologije. Autori studije pronašli su spin u više od polovice sažetaka koje su analizirali.Kakav bi to utjecaj mogao imati na odluke liječnika?
Dok se vijesti i mediji natječu za stavove, ponekad mogu pretjerati s naslovima i sadržajem kako bi namamili čitatelja.
Iako mnogi vjeruju da su znanstveni časopisi jedni od najpouzdanijih izvora informacija, nisu imuni na želju da ih se čita i dijeli.
Nedavno istraživanje ima za cilj procijeniti koliko su "spin" autori koristili u sažetcima istraživačkih radova objavljenih u časopisima za psihologiju i psihijatriju.
Sažetak su odlučili pogledati jer sažimaju cijeli članak, a liječnici ih često koriste kako bi pomogli u donošenju medicinskih odluka.
Što je spin?
U ovoj studiji autori navode svoju definiciju spina kako slijedi:
"[Koristi se specifičnim strategijama izvještavanja, iz bilo kojeg motiva, kako bi naglasio da je eksperimentalni tretman koristan, unatoč statistički beznačajnoj razlici za primarni ishod, ili kako bi odvratio čitatelja od statistički beznačajnih rezultata."
Autori su svoja otkrića objavili u časopisu BMJ Medicina zasnovana na dokazima. Pogledali su radove iz šest najboljih časopisa o psihijatriji i psihologiji od 2012. do 2017. godine.
Uključeni su i časopisi JAMA Psihijatrija, Američki časopis za psihijatriju, i British Journal of Psychiatry.
Konkretno, istraživači su se usredotočili na randomizirana kontrolirana ispitivanja s „beznačajnim primarnim krajnjim točkama“. Primarna krajnja točka studije glavni je rezultat studije, a "beznačajno" u ovom kontekstu znači da statistički tim nije pronašao dovoljno dokaza koji podupiru svoju teoriju.
Spin dolazi u mnogim oblicima, uključujući:
- selektivno izvještavanje o ishodima, pri čemu autori spominju samo određene rezultate
- P-hakiranje, u kojem istraživači provode niz statističkih testova, ali objavljuju samo podatke iz testova koji daju značajne rezultate
- neprimjerena ili obmanjujuća uporaba statističkih mjera
Koliko je čest spin?
Ukupno su analizirali sažetke 116 radova. Od toga je 56% pokazalo dokaze predenja. To je uključivalo zavrtanje u 2% naslova, 21% dijelova rezultata sažetka i 49% u završnim dijelovima sažetka. U 15% radova spin je bio prisutan i u odjeljcima s rezultatima i u zaključcima sažetaka.
Istraživači su također istraživali je li financiranje iz industrije povezano s okretanjem. Možda iznenađujuće, nisu pronašli dokaze da je financijska podrška industrije povećala vjerojatnost okretanja.
Nalazi su zabrinjavajući. Iako je vrtnja u vijestima općenito zabrinjavajuća, liječnici koriste istraživačke radove kako bi pomogli usmjeriti kliničke odluke. Kao što autori pišu:
"Istraživači imaju etičku obvezu iskreno i jasno izvijestiti o rezultatima svog istraživanja." Međutim, u dijelu sažetka, autori mogu odabrati detalje koje uključuju. Autori trenutne studije zabrinuti su što bi ovo moglo značiti za liječnike:
„Dodavanje spin-a sažetku članka može dovesti u zabludu liječnike koji pokušavaju donijeti zaključke o liječenju pacijenata. Većina liječnika većinu vremena čita samo apstraktni članak. "
Implikacije
Iako istraživači nisu istraživali efekte spina u velikoj dubini, autori ukazuju na jedno istraživanje u kojem čekići daju svoj smisao.
U njemu su znanstvenici sakupljali sažetke s područja istraživanja raka. Sve su bile randomizirane kontrolirane studije sa statistički neznačajnim primarnim ishodom. Svi sažeci uključuju spin.
Istraživači su stvorili druge verzije ovih sažetaka u kojima su uklonili okretanje. Kao sudionici regrutirali su 300 onkologa. Istraživači su polovicu od njih dali originalni sažetak sa spinom, a drugoj polovici sažetak bez spina.
Zabrinjavajuće je što su liječnici koji su sažetke čitali sažetke ocijenili intervenciju pokrivenu novinom kao korisniju.
Kao što pišu autori nedavnog studija: „Oni koji pišu rukopise s kliničkih ispitivanja znaju da imaju ograničenu količinu vremena i prostora za privlačenje pozornosti čitatelja. Vjerojatnije je da će se objaviti pozitivni rezultati, a mnogi su se autori rukopisa okrenuli sumnjivoj praksi izvještavanja kako bi uljepšali svoje rezultate. "
Još jedna studija, objavljena 2016. godine, proširuje doseg ovog broja. Istražili su kako su recenzenti - iskusni znanstvenici koji proučavaju radove prije objavljivanja - utjecali na spin. Otkrili su da je u 15% slučajeva recenzent tražio od autora da dodaju spin.
Trenutna studija ima određenih ograničenja. Na primjer, ovi se nalazi možda neće primijeniti na druge časopise ili područja istraživanja. Također primjećuju da je identificiranje spina subjektivan pothvat, i premda su koristili dva neovisna ekstraktora podataka, ima mjesta za pogreške.
Točna veličina izdanja u medicinskim istraživanjima tek će se vidjeti, ali autori zaključuju da bi „autori, urednici časopisa i recenzenti trebali i dalje budno paziti na spin kako bi smanjili rizik od pristranog izvještavanja o rezultatima ispitivanja. "
