Мышление авторов этого объявления можно подвергнуть критике по многим пунктам (включая и явную инсинуацию в адрес штата Миссисипи), но целью нашего обсуждения является только рассмотрение характера сравниваемых выборок. Вступительные экзамены в колледж сдают только те школьники, которые собираются учиться в колледже. В Калифорнии эти экзамены сдает гораздо большая часть старшеклассников, чем в Миссисипи. Хотя я не знаю точных фактических цифр, предположим, что в Калифорнии эти экзамены сдают 40 % лучших выпускников средней школы, а в Миссисипи — только 10 %. Теперь вы видите, почему можно ожидать, что выпускники из Миссисипи покажут лучшие результаты — из-за нерепрезентативности выборки. Существуют и другие причины, по которым можно ожидать, что эти результаты не связаны с качеством образования. В Калифорнии много недавно приехавших иммигрантов, потому многие учащиеся говорят по-английски не так хорошо, как те, для кого английский язык является родным. Из-за этого средний балл учащихся штата тоже может понизиться. Таким образом, опять дело в выборке, поскольку не проводится сравнение групп, которые отличаются лишь одной интересующей нас переменной (штат, в котором получено образование). Конечно, не исключено, что в Миссисипи школьники получают лучшее образование, чем в Калифорнии, но это не следует из приведенных данных.
Размер выборки
Получив наперсток фактов, мы делаем поспешные обобщения размером с целую лохань.
Гордон Олпорт (Allport, 1954, р. 8)
Количество испытуемых, включенных в выборку, называется размером выборки. Допустим, что по первой программе лечились 6 пациентов/испытуемых, а по второй программе — 10 пациентов/испытуемых. (Испытуемый — это человек, животное или организм, который участвует в эксперименте.) Обе эти выборки слишком малы, чтобы определить степень успешности лечения. При проведении экспериментов ученые часто используют большое количество испытуемых. Если по какой-то причине у них не окажется большого количества испытуемых, то, возможно, им придется осторожнее и консервативнее относиться к выводам, полученным с помощью своих исследований. Несмотря на то что обсуждение числа испытуемых, необходимых для проведения эксперимента, выходит за рамки этой книги, важно помнить, что для большинства повседневных целей мы не можем обобщать на весь контингент результаты наблюдений за реакциями небольшой группы людей.
Предположим, что с вами произошла следующая история. После нескольких месяцев колебаний вы, наконец, решили купить машину марки «Шевроле Камаро». Вы обнаружили, что эта машина имеет высокий рейтинг в двух журналах — в Consumer Reports («Отзывы потребителей») и Road and Track («Пути — дороги»). Цена «Камаро» укладывается в ваш бюджет, и вам нравится его обтекаемая форма и спортивный стиль. Выходя из дома, чтобы оформить сделку, вы встречаетесь с близкой подругой и сообщаете о своей предполагаемой покупке. «"Камаро?" — кричит она. — Брат моего мужа купил эту машину — это просто консервная банка. Она постоянно ломается на дороге. Ее так часто таскали на буксире, что пора заменять бампер». Что вы будете делать?
Большинству людей было бы трудно все-таки решиться на покупку, потому что они не обращают достаточного внимания на размеры выборки. Общенациональные журналы, вероятно, проверили много машин перед тем, как определили свой рейтинг. Брат мужа вашей подруги — это один испытуемый. Вам следует больше доверять результатам, полученным на больших выборках, по сравнению с результатами, полученными на маленьких (при условии, что «эксперименты» были одинаково корректными). Тем не менее, многие считают рекомендации единственного человека, особенно если это их знакомый, убедительнее информации, полученной на большой выборке.
Мы склонны игнорировать важность достаточно большого размера выборки, когда действуем как «интуитивные ученые». Именно поэтому рекомендации являются таким мощным средством убеждения людей, внушая им, что делать и во что верить. Но рекомендации основываются на опыте только одного человека, и часто этому человеку платят за то, чтобы он хвалил определенный товар. В моей коллекции есть реклама телефонных консультаций экстрасенса, где в качестве доказательства того, что советы экстрасенсов эффективно помогают решить целый ряд проблем, приводятся «реальные случаи». «Жительница города Лансинга в штате Мичиган вновь обрела интерес к жизни после одной беседы с экстрасенсом… А женщина из Питтсбурга (штат Пенсильвания) чувствует, что экстрасенс как будто заглянул прямо ей в душу» («Космополитен», январь, 1994). Чтобы эти комментарии звучали более правдоподобно и носили личный характер, авторы ссылаются на определенных людей, не называя их имен, но указывая название города и штата. Чем определеннее получаемая нами информация, тем больше вероятность, что мы поверим в ее истинность. Но дайте мне передохнуть!