Психология оценки и принятия решений

Более совершенной методикой является оценка точности через ряд условий уверенности. Если точность подсчитывается для разных уровней уверенности, то появляется возможность создать «кривую градуирования», где горизонтальная ось будет обозначать уверенность, а вертикальная — точность. Рисунок 19.2 содержит две кривые градуирования: одна — для предсказания метеослужбами выпадения осадков, другая — для диагнозов пневмонии. Как вы можете видеть, предсказания погоды почти

Рисунок 19.2

Этот рисунок содержит кривые градуирования для прогнозов погоды (незакрашенные кружки) и диагнозов пневмонии (закрашенные кружки). В то время как прогнозы погоды почти безупречно проградуированы, врачи демонстрируют чрезмерную самоуверенность (при наличии или отсутствии у пациента пневмонии). Данные о прогнозах погоды взяты из отчета Аллана Мерфи и Роберта Уинклера (1984), а данные о врачах — из исследования Джей Кристенсен- Шалански и Джеймса Бушихеда (1981).

277

совершенно проградуированы, в среднем их прогнозы почти всегда совпадают с погодой (вопреки традиционным взглядам!). А вот диагнозы проградуированы очень плохо; большинство предсказаний этого характера лежат ниже линии, символизирующей совершенную градуировку.

Существует еще несколько способов оценивать градуировку, некоторые из них подразумевают хорошее знание математики. Например, одна из наиболее распространенных методик состоит в следующем: необходимо подсчитать так называемый «показатель Брайера» (названный по имени статистика Гленна Брайера). Показатель Брайера может быть разложен на три компоненты, одна из которых соотносится с градуировкой. Эта компонента числа Брайера представляет собой взвешенную среднюю величину между среднеквадратичными отклонениями пропорциональной точности во всех категориях и вероятности для каждой категории (более подробно см. Йетс, 1990).

Одна из наиболее интересных оценок градуировки известна как «индекс неожиданности». Индекс используется для оценок промежутков, точность которых известна. Например, представьте, что вы почувствовали 90%- ную уверенность в том, что правильный ответ на вопрос п. 12 Анкеты находится где- то между дюймом и милей (см. п. 126). Поскольку правильный ответ больше мили, этот ответ должен быть засчитан как неожиданность. Индекс неожиданности — это простое процентное выражение оценок, лежащих за границей уверенности.

В фундаментальном обзоре исследований градуирования Лихтенштейн, Фишхофф и Филлипс (1982) оценивали некоторые исследования, в которых респондентов просили указать интервалы, в которых они уверены на 98% (т.е. интервалы, которые с вероятностью 98% включали бы в себя верный ответ). В каждом исследовании ожидаемый индекс неожиданности составлял 2%. В среднем по данным всех экспериментов (всего около 15 000 оценок) индекс неожиданности составил около 32%. Другими словами, когда респонденты были уверены на 98%, что правильный ответ в названном ими промежутке, они оказывались правы на 68%. Еще раз переоценка подтвердила правило, а не исключение.

Склонны ли вы к переоценке? Эдуард Руссо и Поль Шумахер в 1989 году придумали легкий тест для самопроверки (см. рис. 19.3). Несмотря на то что исчерпывающая оценка градуировки (278:) требует сотен ответов, этот тест дает вам общее впечатление о том, каков ваш индекс неожиданности при ответе на вопросы из области общего знания при одном уровне уверенности. Руссо и Шумахер предложили этот тест более чем 1000 человек и обнаружили, что менее 1% респондентов смогли верно ответить на 9 или все 10 вопросов. Большинство людей неверно отвечали на 4- 7 вопросов (индекс неожиданности 40- 70%), опять- таки подтвердив свойство переоценки.

Тест для самопроверки переоценки себя

Для каждого вопроса отметьте верхнюю и нижнюю границы, в которых (вы уверены на 90%) находится этот ответ. Вы не должны ни переоценить, ни недооценить свою правоту. Если вы успешно справитесь с заданием, у вас будет 10% непопадания, т.е. одна ошибка.

Уверенность на 90%

Нижняя

Верхняя

1. Мартин Лютер Кинг умер в возрасте

2. Длина Нила

3. Количество стран — членов OPEC

4. Количество книг в Ветхом Завете

5. Диаметр Луны в милях

6. Вес Боинга 747в фунтах

7. Год рождения Вольфганга Амадея Моцарта

8. Период беременности (в днях) азиатского слона

9. Прямое расстояние от Лондона до Токио

10. Самая большая глубина океана (в футах)

Ответы: (1) 39 лет; (2) 1187 миль; (3) 13 стран; (4) 39 книг; (5) 2160 миль; (6) 390 000 фунтов; (7) 1756; (8) 645дней; (9) 5 959 миль; (10) 36 198 футов.

Рисунок 19.3

Этот тест может навести вас на мысль о том, не переоцениваете ли вы свои знания (перепечатано с разрешения Руссо и Шумахера, 1989).

Корреляция между уверенностью и точностью

Переоценка не является чем- то неизменным, оценку вполне возможно привести в согласие с точностью. Например, (279:) представьте себе человека, который был на 50% точен, будучи на 70% уверен, на 60% точен, будучи на 80% уверен, и т.д.