Наукообразная чушь. Разоблачение мошенничества, предвзятости, недобросовестности и хайпа в науке

После этих хитростей осталось всего пять однозначно отрицательных исследований – то есть вдесятеро меньше, чем было исходно. И гнилой вишенкой на торте послужило то, что в итоге положительные испытания цитировались в последующих работах в три раза чаще, чем отрицательные. Весь этот удручающий процесс пошагово показан на рисунке 4.

Рис. 4. Хитрая схема, скрывающая отрицательные результаты. Каждая точка представляет собой испытание антидепрессантов; черные точки – испытания с отрицательными результатами. Мы можем наблюдать, как по мере движения слева направо исследования с отрицательными результатами исчезают. Отрицательные исследования публикуются значительно реже, чем положительные; превращаются в положительные за счет переключения на другие исходы; подаются под таким углом, чтобы выглядеть положительными, слегка либо значительно; цитируются гораздо реже, чем положительные исследования, чьи точки в последней колонке раздуты. В итоге мы видим почти исключительно положительные результаты. Адаптировано из De Vries Y. A. et al., 2018

Это характерно не только для исследований антидепрессантов: авторы отследили аналогичную цепочку событий в испытаниях новых методов психотерапии[684]. На самом деле то же самое происходит – в большей или меньшей степени – почти со всеми научными исследованиями. Любой будущий специалист по метаанализу, который захочет объять полную картину конкретной области исследований, получит чудовищно искаженную перспективу – и даже не узнает об этом, если, конечно, не изучит подробно регистрационные документы клинических испытаний (которые, кстати, не являются обязательными ни в каких других областях, кроме медицины). В работе де Врис не изучалось возможное мошенничество, или ошибки в дизайне исследования и при анализе результатов, или раскрутка при представлении методов лечения в средствах массовой информации и их продвижении, но мы без колебаний можем предположить, что и это все постоянно происходит, еще больше размывая реальные исследования.

Очевидно, что вскрытое де Врис и ее коллегами далеко от описанного в начале этой книги идеала науки, предполагающего, что социальные процессы публикации и рецензирования обеспечивают распространение по миру фактов и отсеивание любых случайных ошибок. Так как же науку спасти? Как нам перестроить культуру и стимулы для процессов публикации научных результатов, финансирования науки и определения приоритетов, чтобы они поощряли истину и надежность вместо ярких историй? Как нам оградить науку от ученых (воспользуемся названием документальной программы на радио BBC)?

В этой заключительной главе мы в общих чертах обсудим ответы на подобные вопросы. Во-первых, мы рассмотрим широкий спектр изменений, которые можно внести, чтобы предотвратить четыре основные проблемы: мошенничество, предвзятость, недобросовестность и хайп – или по крайней мере смягчить их последствия. Затем мы обсудим способы, какими можно преобразовать не только повседневную работу ученых, но и саму научную культуру. Некоторые изменения уже происходят, другие – дерзновенные проекты, способные произвести революцию в том, как наука делается.

В третьей главе мы видели, что университеты часто экранируют научных мошенников от последствий их действий. В знаменитых случаях, которые мы рассмотрели, плотину секретности в конце концов прорвало и имена мошенников всплыли: Дидерик Стапел, Паоло Маккиарини, Хван У Сок, Ян Хендрик Шён и легион других. Но во многих случаях менее злостного нарушения норм научной работы имена так никогда и не предаются огласке[685]. Неудивительно, что вокруг безнаказанно промышляет столько научных мошенников, если мало шансов, что их заметят, а кроме того, мало шансов, что, если их все-таки поймают, многие о том узнают. Таким образом, первое, что стоит менять: нужно хотя бы просто называть и стыдить тех, кого уличили в недобросовестной научной практике[686].

Конечно, университеты не сильно заинтересованы в том, чтобы это делать, поэтому следующая идея – отдать бразды правления в этом вопросе независимым организациям. Тут уже есть некоторые подвижки. Например, увидев, как Каролинский институт осрамился из-за дела Маккиарини о трансплантации трахей, шведское правительство в 2019 году приняло закон, запрещающий университетам самостоятельно расследовать случаи нарушения норм научной работы и предписывающий передавать эту ответственность независимому правительственному агентству[687].