I věda se mýlí: replikační krize

Rok 2015: psychologie se podívala do zrcadla

V roce 2015 zveřejnil velký tým vědců výsledek, který obor rozdělil na „před" a „po": pokusili se znovu provést 100 vlivných psychologických studií a statisticky významný výsledek v původním směru se podařilo potvrdit jen zhruba u 36 % z nich. ^[6] O tři roky později prověřila jiná skupina 21 společenskovědních studií z nejprestižnějších časopisů Nature a Science — zopakovat se podařilo 13 z nich (62 %), a i ty s efektem zhruba polovičním oproti originálu. ^[6] Nešlo o hon na čarodějnice, ale o zdravou sebereflexi: věda si sáhla na vlastní spolehlivost a zjistila, že je nižší, než se myslelo.

Proč tolik studií neobstálo? Zjednodušeně: honba za „pěknými" pozitivními výsledky, publikování jen toho, co „vyšlo", a malé vzorky. Detailní mechaniku selhávání vědy (od ohýbání statistiky po předstírané výsledky) rozebírá sesterská příručka o vědě — tady nás zajímá něco konkrétnějšího: které slavné efekty z literatury o lidských chybách samy neobstály.

Galerie padlých hvězd

Priming stářím. V roce 1996 slavný pokus tvrdil, že když lidé skládají věty ze slov spojených se stářím (šedý, vráska, Florida), odcházejí pak z místnosti pomaleji. Znělo to kouzelně a dostalo se to do učebnic. Jenže pečlivá replikace v roce 2012 (na dvojnásobném vzorku a s automatickým měřením času místo stopek v ruce experimentátora, který znal hypotézu) žádný efekt nenašla. ^[1] Právě tenhle typ „slovo → chování" primingu dnes obor považuje za nespolehlivý.

Ego depletion (vybíjení vůle). Vlivná teorie z konce 90. let tvrdila, že sebeovládání funguje jako baterie: když se přemáháte u jednoho úkolu, na další už „nemáte sílu". V roce 2016 to prověřil registrovaný replikační pokus — 23 laboratoří, přes 2 000 lidí, předem zveřejněný postup. Výsledek byl statisticky nerozeznatelný od nuly. ^[2] (Zastánci teorie namítají, že testovací úloha nebyla ideální — spor zcela neskončil, ale původní velký efekt doložený není.)

Power posing (mocenské pózy). Studie z roku 2010 a jedna z nejsledovanějších přednášek TED tvrdily, že dvě minuty v „mocné" póze zvýší testosteron, sníží stresový hormon a učiní vás odvážnějšími. Replikace na 200 lidech (2015) žádný takový hormonální ani behaviorální účinek nenašla — a co je pozoruhodné, sama hlavní autorka studie později veřejně napsala: „Nevěřím, že jsou efekty ‚mocenských póz‘ skutečné." ^[3] Přežít může nanejvýš subjektivní pocit „cítím se sebejistěji", ale ani ten není jistý.

Populární Dunning-Kruger. Jak jsme viděli v kapitole o sebeklamu, rozšířená verze („neschopní se považují za chytřejší než schopní") je nepravdivá už oproti původní studii — a navíc statistici ukázali, že podobný obrazec vznikne i z náhodných dat. ^[5] Spor, zda za ním je i skutečná „slepota k vlastní neschopnosti", stále běží; jistá je jen ta populární karikatura, která je špatně.

Co krize NENÍ: „všechno je podvod"

Bylo by pohodlné (a nebezpečné) uzavřít to slovy „psychologie nic neví". To by byl přesně ten druh zkratky, před kterým celý průvodce varuje. Pravda je jiná: jednoduché, dobře definované efekty obstojí výborně. Když projekt Many Labs 2 (2018) prověřil 28 klasických efektů ve 125 vzorcích po celém světě (přes 15 000 lidí), zhruba polovina se spolehlivě potvrdila — a mezi nejrobustnějšími byl ukotvení. ^[7] Stroopův efekt nebo efekt dezinformace se v seznamech „neobstálo" ani neobjevují. Rozdíl je systematický: křehké jsou hlavně efektní, společensky zprostředkované „průlomy" postavené na jedné studii; pevné jsou střízlivé, mnohokrát zopakované základní jevy.

Jak se věda opravuje — a jedna trefná ironie

Dobrá zpráva: obor se nezhroutil, ale zavedl nápravy. Klíčová je preregistrace — vědec ještě před sběrem dat veřejně napíše, co bude testovat a jak, takže už si výsledek nemůže „dohledat" dodatečně. Srovnání ukázalo jeho sílu názorně: v běžné literatuře vychází pozitivní („vyšlo nám to") kolem 96 % studií, kdežto u předem zaregistrovaných jen asi 44 %. ^[8] Ten rozdíl je mírou toho, kolik „úspěchů" dřív vznikalo tlakem publikovat jen hezké výsledky.

Proč to platí i pro tento průvodce

Vyvrácené efekty mají tuhý život. I když věda „průlom" dávno odvolala, žije dál v učebnicích, v motivačních přednáškách a na sociálních sítích — rozbor učebnic ukázal, že třeba moderní kritiku Milgramových a Zimbardových pokusů většina učebnic vůbec nezmiňuje. ^[9] Psycholožka Lisa Feldman Barrettová pro takové neumírající nápravy razí termín „zombie nápady": poznatky spolehlivě vyvrácené, které přesto odmítají zemřít. ^[9]

Proto tenhle průvodce dělá dvě věci. Zaprvé u každého sporného efektu píše „⚠ sporné" a přiznává nejistotu, místo aby vám prodával jistotu, kterou nemá. Zadruhé se opírá hlavně o efekty, které opakování přežily. Není to slabost — je to jediný poctivý způsob, jak psát o vědě, která se sama učí za pochodu. A přesně tuhle skepsi budete potřebovat v následující kapitole, kde uvidíme, jak našich chyb — potvrzených i domnělých — využívají ti, kdo chtějí náš čas, hlas a peníze.