Sociale wetenschappen moeten leren falen om succes te hebben

Andrew Gelman, statisticus en psycholoog

Andrew Gelman, statisticus en psycholoog: …falen moet mogelijk zijn…

Sociale wetenschappen hebben het moeilijk. Anders dan natuurwetenschappers is het bij sociaalwetenschappelijk onderzoek, daar schaar ik economie ook onder, lastig zo niet onmogelijk een heel wildenbomenbos aan variabelen in de hand te houden. Uitspraken op dit terrein zouden dan ook altijd met veel slagen om de arm mogen worden gedaan, maar zo’n sociale wetenschapper moet ook eten (= onderzoek doen) en wil de wereld, om te beginnen de wetenschappelijke, wel laten weten welke opzienbarende zaken hij/zij nu weer heeft ontdekt. Dan krijg je onderzoekresultaten als studenten gaan langzamer lopen als ze met ouderdom gerelateerde woorden horen, de verkiezingen worden beïnvloed door sportwedstrijden en overgewicht is besmettelijk. Volgens Andrew Gelman van de Columbia-universiteit, statisticus en socioloog, allemaal studies die in gerenommeerde bladen zouden zijn verschenen. Dus maar kappen met die onmogelijke sociale wetenschappen? Gelman vindt dat we eerst moeten leren in het zand te bijten alvorens te gloriëren. Ik heb zo mijn twijfels, grote twijfels. Lees verder

Zijn psychologische onderzoekers toch geen knoeiers?

Psycholoog Timothy Wilson van de universiteit van Virginia

Criticus van het replicatieproject Timothy Wilson (afb: NYT)

Psychologen en vooral psychologische onderzoekers, daar lusten de harde wetenschappers en hun beta-aanhang wel pap van. Knoeiers zijn het die op basis van lullige onderzoekjes met gebrekkig statistisch inzicht knoeiresultaten afleveren, als ze die al niet verzinnen. Vorig jaar verscheen er een verslag van een onderzoeksproject dat zou hebben uitgewezen dat een groot deel van psychologisch onderzoek niet was te reproduceren. Die onderzoekers krijgen nu op hun beurt zelf weer billenkoek. De critici zouden zelf statistisch in de fout zijn gegaan waardoor hun conclusie op losse schroeven is komen te staan. De reproduceerbaarheid in het psychologisch onderzoek is zelfs vrij hoog, beweren vier onderzoekers. Lees verder

Veel onderzoek psychologie ‘niet te volgen’

Brian Nosek

Brian Nosek, leider reproduceerbaarheidsproject psychologie

De wetenschap staat of valt met reproduceerbaarheid. Is het experiment te herhalen en zijn dan de uitkomsten nog steeds dezelfde? Bij opzienbarende vindingen, zoals de koude kernfusie, zijn veel onderzoekers bereid die proeven te herhalen, maar meestal wordt die ‘reproductie’ als een vervelend karwei beschouwd: het is nodig en nuttig, maar ik ga liever op eigen kracht en vindingrijkheid voorwaarts. Zodoende blijven veel onderzoeksresultaten ongetoetst en, dat is het lullige, ook geciteerd worden. Een groep psychologen heeft deze saaie koe nu eens bij de hoorns gevat en heeft geprobeerd 100 recente onderzoeken te herhalen. Wat bleek: in minder dan de helft van de herhaalde onderzoeken konden ze de oorspronkelijke resultaten reproduceren. Lees verder

Jaarlijks in VS miljarden verspild aan biomedisch onderzoek

Biomedisch onderzoekJaarlijks zou er in de VS 28 miljard dollar (zo’n € 24 miljard) worden verspild aan niet reproduceerbaar biomedisch onderzoek. “We wijzen op de kosten”, zegt de hoofdauteur Leonard Freedman van het artikel in PLOS Biology over de inventarisering. “We willen ook de discussie over oplossingen op gang brengen.” Niet iedereen neemt de schatting voor reëel. Lees verder