Человек и ситуация. Уроки социальной психологии

Когда речь заходит о вопросах социальной политики, уроки нашей науки побуждают нас отстаивать ценность и экономическую оправданность вдумчиво разработанных и тщательно выполненных эмпирических исследований. Мы имели возможность убедиться в том, что лабораторные и «полевые» исследования действительно могут представлять ценность при обращении к темам, составляющим ядро нашей правовой системы (Ellsworth, 1985; Hastie, Penrod & Pennington, 1983), равно как и при проверке эффективности образовательных программ, разработанных с целью улучшения здоровья и повышения безопасности населения (Evans, 1982; Meyer, Maccoby & Farquahar, 1980; Robertson et al., 1984). В результате мы выступаем поборниками формальных экспериментальных проектов в тех случаях, когда их реально можно применить, и сторонниками необходимых методологических, статистических и интерпретационных предосторожностей в случаях (которых гораздо больше), когда применение строгих экспериментов не представляется возможным (Campbell, 1969; Campbell & Stanley, 1963, 1966; Cook & Campbell, 1979; Cronbach, 1982).

О пользе «чистых экспериментов»

Некоторые наиболее важные и драматические иллюстрации ценности формального (выполненного по всем правилам) экспериментирования и тех угроз, которые таят в себе «клинические» методы исследования, получены в медицине. Классическим примером служит история исследования эффективности «портокавального шунтирования». Прибегнув к нечасто применяемому методу метаанализа, Грейс, Мюнх и Шальмер (Grace, Muench & Chalmers, 1966) сопоставили выводы, к которым пришли исследователи, использовавшие различные методологические схемы для оценки эффективности популярного некогда метода хирургического лечения цирроза печени. Метод заключался в соединении воротной вены пациента непосредственно с его полой веной^{24}. Результаты произведенного сопоставления приводятся в таблице.

Таблица

Анализ исследований

Экспериментальная схема

Примечание. Выводы 51 исследования эффективности портокавального шунтирования зависели от схем организации исследований. Корректно проведенные сопоставления показывают, что операция имеет незначительный эффект либо она вообще неэффективна. Некорректно спланированные исследования преувеличивают эффективность хирургического вмешательства. (В таблице обобщены данные, приводимые в следующих работах: Grace, Muench & Chalmers, 1966, p. 685; Freedman, Pisoni & Purves, 1978, p. 8.)

Мы видим, что в 32 случаях, составляющих большую часть общего числа опубликованных отчетов (51), исследователи полагались на стандартные для клинической практики процедуры оценки.

Иными словами, в своих заключениях исследователи исходили из количества случаев улучшения или случаев отсутствия улучшения, имевших место у совокупности пациентов, которым была сделана операция (хотя, предположительно, исследователи каким-то образом учитывали информацию и о тех больных, которым операция сделана не была). Как явствует из таблицы, практически все исследователи пришли к положительному заключению об эффективности портокавального шунтирования.

Во второй по численности группе исследований (15 исследований во второй строке таблицы) ученые прямо сравнивали состояние пациентов, перенесших операцию, с состоянием пациентов, которые операции не подвергались, хотя больные циррозом печени не были распределены по этим двум группам случайным образом. Подобный метод сравнения вновь привел большинство исследователей к положительным выводам. Только четыре исследования были основаны на методе случайного распределения испытуемых по разным экспериментальным условиям, использование которого необходимо, чтобы подобный эксперимент мог быть признан «чистым». Именно они позволили медикам прийти к правильному заключению. Оно сводилось к тому, что портокавальное шунтирование не приносило пациентам вообще никакой пользы и, следовательно, на получение положительных результатов при использовании менее корректных методов сравнения оказали влияние либо «эффекты плацебо» (которые мы еще будем обсуждать ниже), либо тенденциозности, возникающие из-за неслучайного отбора пациентов в группу, которая подвергалась хирургическому вмешательству.