Но давайте оставим статистику специалистам — Иоаннидис действительно занимался анализом уже имеющихся данных, не пытаясь собственноручно повторять медицинские исследования. Это, разумеется, невозможно сделать в одиночку — но вот когда над этим работают 270 специалистов. В 2015 году "Коллаборация за открытую науку" во главе с Брайаном Носеком (профессором психологии Университета Вирджинии и исполнительным директором Центра открытой науки) опубликовала результаты своей четырехлетней работы по воспроизведению сотни психологических экспериментов, опубликованных в ведущих журналах. Результат оказался впечатляющим: из 100 работ ученым удалось повторить — с разной степенью близости к оригиналу — только 39. А статистически значимых результатов было получено и того меньше — всего 36, при этом уровень значимости был примерно вдвое ниже, чем в исходных статьях.
Некоторые ученые высказали предположение, что на самом деле уровень невоспроизводимости может быть и того выше — ведь команда Носека отбирала публикации только из наиболее уважаемых журналов. Однако это не означает, что психология несостоятельна как наука. Проблемы, обнаруженные Носеком и его группой, касаются в первую очередь практических аспектов: дизайна исследований, обработки данных и их интерпретации, а также редакционной политики журналов. По мнению авторов, их проект был нужен в первую очередь для выявления существующих в научной сфере проблем. Более того, как утверждал сэр Карл Поппер, один из самых влиятельных философов науки XX века, по-настоящему научным является такое утверждение, которое в принципе можно опровергнуть на основании новых данных. Если итоги вашего эксперимента после новой серии экспериментов оказались иными — это значит лишь то, что вы ученый, который ошибался или заблуждался.
В 2011 году сотрудники компании Bayer попробовали повторить 67 работ, посвященных исследованиям рака, — воспроизвести удалось около 25 % результатов. В 2012 году подобной работой занялись представители компании Amgen — им удалось сделать это для шести из 53 статей.
При этом не стоит надеяться на то, что ошибочная статья, результаты которой широко разошлись и были опубликованы в СМИ, быстро привлечет внимание специалистов. Иногда ложные исследования не только прочно входят в сознание обывателя, но и попадают в учебники. Наверно, самый знаменитый пример такой истории — Стэнфордский тюремный эксперимент 1971 года. Он был проведен по заказу Военно-морского флота США и представлял собой проверку реакции человека на ограничение свободы в условиях тюремной жизни и создания новой иерархии.
Добровольцев для участия в эксперименте набрали по объявлению в газете. Ученые разделили 24 человек на две группы — "заключенных" и "охранников". В подвале факультета психологии Стэнфордского университета организовали "тюрьму" и поместили туда молодых людей. "Охранникам" велели создать у "заключенных" чувство тоски, страха, "ощущение произвола и того, что их жизнь полностью контролируется системой <…> и у них нет никакого личного пространства". Использовать любое насилие при этом запрещалось. "Заключенные" сначала пытались бунтовать, впадали в ярость, а затем достаточно быстро стали вести себя пассивно. "Охранники" же начали проявлять настоящую жестокость, как психологическую, так и физическую — молодые люди действовали примерно так же, как и профессиональные надзиратели.
Эксперимент был рассчитан на две недели, но его прекратили на шестой день, потому что действия "охранников" вышли из-под контроля. Руководитель Филипп Зимбардо заключил, что человеческое поведение может очень сильно меняться под влиянием внешних факторов: получившие власть будут доминировать над подчиненными, последние же получат психологические травмы. Эти выводы использовали даже для оправдания поведения охранников в настоящих тюрьмах, в том числе и нацистов в концлагерях. Стэнфордский тюремный эксперимент почти полвека был "классикой" психологических опытов (хотя его методология периодически и подвергалась критике), а сам Зимбардо написал о нем несколько книг.