Výzkum, u kterého je méně pravděpodobné, že bude pravdivý, je více citován

Články, které nelze replikovat, jsou citovány 153krát častěji, protože jejich výsledky jsou zajímavé, uvádí nová studie UC San Diego.

Podle nové studie z University of California School of Management v San Diegu jsou články v předních časopisech o psychologii, obchodu a vědě, které nejsou replikovatelné, a proto jsou méně pravděpodobné, často uváděnými články v akademickém výzkumu.

Publikoval v Pokrok ve věděČlánek zkoumá pokračující „replikační krizi“, při které vědci zjistili, že mnoho poznatků v sociálních vědách a medicíně neobstojí, když se jiní vědci pokusí pokusy opakovat.

Článek ukazuje, že výsledky studií, které nelze ověřit opakováním experimentů, mají větší dopad na čas. Nespolehlivý výzkum má tendenci být citován, jako by byly výsledky pravdivé dlouho poté, co publikaci nebylo možné replikovat.

„Víme také, že odborníci dokážou dobře předvídat, které práce budou replikovány,“ píší Marta Serra-Garcia, odborná asistentka ekonomiky a strategie na škole Rady, a Uri Gneezy, profesorka behaviorální ekonomie také na škole Rady. „Vzhledem k této předpovědi se ptáme„ proč jsou vůbec nereplikovatelné dokumenty přijímány ke zveřejnění? ““

Vaše možná odpověď je, že týmy vědeckých časopisů kompromisují. Pokud jsou výsledky „zajímavější“, použijí nižší standardy reprodukovatelnosti.

Roční počet citací podle reprodukovatelnosti

Průměrná roční citace za rok pro studie, které nebyly replikovány v každé replikační studii (měřeno p-hodnotou replikace) a pro ty, které byly replikovány. Světle šedá oblast ukazuje rok (roky), kdy byly původní studie publikovány, a tmavá čára ukazuje rok (roky), kdy byla studie replikace publikována. Fotografický kredit: UC San Diego

Souvislost mezi zajímavými výsledky a nereprodukovatelným výzkumem může také vysvětlit, proč je citována mnohem častěji – autoři zjistili, že úspěšně replikované články jsou citovány 153krát méně než ty, které selhaly.

„Zajímavé nebo poutavé výsledky jsou také více pokryty médii nebo sdíleny na platformách, jako je Twitter, které získává velkou pozornost, ale to je nedělá pravdivými,“ řekl Gneezy.

Serra-Garcia a Gneezy analyzovali data ze tří vlivných replikačních projektů, které se snažily systematicky replikovat výsledky v předních časopisech z oblasti psychologie, obchodu a obecné vědy (příroda a věda). V psychologii bylo úspěšně replikováno pouze 39 procent ze 100 experimentů. V podnikání se opakovalo 61 procent z 18 studií, stejně jako 62 procent z 21 studií publikovaných v Nature / Science.

Na základě výsledků těchto tří replikačních projektů autoři pomocí Google Scholar otestovali, zda byly papíry, které nebylo možné replikovat, citovány významně častěji než ty, které byly úspěšně replikovány, a to jak před publikováním projektů replikace, tak po nich. Největší rozdíl byl v článcích publikovaných v Nature / Science: nereplikovatelné články byly citovány 300krát častěji než replikovatelné.

Když autoři vzali v úvahu různé charakteristiky replikovaných studií – například počet autorů, počet autorů mužského pohlaví, podrobnosti experimentu (umístění, jazyk a online implementace) a oblast, ve které byl článek publikován – vztah mezi reprodukovatelností a citacemi zůstal nezměněn.

Ukazují také, že dopad takových citací se časem zvyšuje. Roční počty citací ukazují výrazný rozdíl mezi replikovanými a nereplikovanými příspěvky. V průměru jsou papíry, které nebyly replikovány, citovány 16krát častěji ročně. Tato mezera přetrvává i po zveřejnění projektu replikace.

„Je pozoruhodné, že pouze 12 procent nereplikovatelných výsledků citovaných po replikaci potvrzuje selhání replikace,“ píší autoři.

Dopad nepřesného článku publikovaného v renomovaném časopise může mít dopad po celá desetiletí. Například studie Andrewa Wakefielda publikovaná v Lancet V roce 1998 se desítky tisíc rodičů po celém světě obrátily proti vakcínám proti spalničkám, příušnicím a zarděnkám kvůli implicitní vazbě mezi očkováním a autismem. Falešné výsledky The Lancet stáhl o 12 let později, ale tvrdí, že autismus je spojen s vakcínami.

Autoři dodali, že časopisy by mohly být pod tlakem zveřejňovat zajímavé výsledky, stejně jako vědci. Například většina akademických institucí používá při rozhodování o povýšení citace jako důležitou metriku při rozhodování, zda povýšit člena fakulty.

To by mohlo být příčinou „replikační krize“, která byla poprvé objevena na počátku 2010.

„Doufáme, že náš výzkum povzbudí čtenáře, aby byli opatrní při čtení něčeho zajímavého a poutavého,“ uvedla Serra-Garcia. „Kdykoli vědci uvedou práci, která je zajímavější nebo byla široce citována, doufáme, že prozkoumají, zda jsou k dispozici replikační data a co tyto výsledky naznačují.“

Gneezy dodal: „Staráme se o tuto oblast a provádíme kvalitní výzkum a chceme, aby to byla pravda.“

Odkaz: 21. května 2021, Pokrok ve vědě.
DOI: 10.1126 / sciadv.abd1705

Related articles

Comments

LEAVE A REPLY

Please enter your comment!
Please enter your name here

Share article

Latest articles

Drsná kůra, která se v noci ozývá, vede k objevení nových druhů

V lesích západní a střední Afriky se v noci ozývají hlasitá volání hybridů stromů - malých, býložravých savců, ale jejich zvuk se liší podle...

Nástroj Nový nástroj určený k podpoře vývoje a vývoje automobilových vozidel

Schematický vnitřní provoz elektrod v palivovém článku և kapacita základních parametrů. Půjčka:Heinz a kol., 2021: Široké používání tradičních vozidel na vodíkový pohon nad tradičními...

Identifikace velmi počátečních kroků, které vedou k rozvoji rakoviny

Konfokální mikrofotografie tenkého střeva myši pomocí technologie Red2Onco. S Red2Onco můžete označit onkogenní mutantní klony (červené klony) a běžné nebo divoké klony (žluté...

Neandertálci a raná moderní lidská kultura koexistovali vedle starších tradic již více než 100 000 let

Výzkum Fakulty antropologie a ochrany na University of Kent zjistil, že jedna z prvních kultur kamenných nástrojů známá jako Acheulean trvala pravděpodobně o desítky...

Snadná věda: co jsou sterilní neutrina?

Sterilní neutrina jsou speciální typ neutrin, který byl navržen k vysvětlení některých neočekávaných experimentálních výsledků, ale nakonec nebyl objeven. Vědci je hledají v...

Newsletter

Subscribe to stay updated.