Мышление разведчика. Почему одни люди видят все как есть и принимают правильные решения, а другие — заблуждаются

Идеальная калибровка — абстракция, которой невозможно достичь в реальной жизни. Однако это удобный эталон для самопроверки. Чтобы лучше усвоить концепцию калибровки, продолжим измываться над Споком и посмотрим, насколько его калибровка близка к идеальной. Я составила список всех появлений Спока в первоначальном телесериале «Стартрек», мультсериале «Стартрек» и всех полнометражных фильмах серии, проверяя их на слова «вероятность», «процент», «шанс», «возможно», «невозможно», «вероятно», «невероятно», «исключено». Всего я нашла 23 эпизода, в которых Спок высказывал какое-нибудь утверждение и давал ему численную оценку, а затем прогноз оказывался верным или неверным. Подробнее о предсказаниях Спока и о том, как я их классифицировала, рассказано в приложении, но вот результаты вкратце:

• Когда Спок называет некое событие невозможным, оно происходит в 83 % случаев.

• Когда Спок называет событие маловероятным, оно происходит в 50 % случаев.

• Когда Спок называет его крайне маловероятным, оно происходит в 50 % случаев.

• Когда Спок называет его вероятным, оно происходит в 80 % случаев.

• Когда Спок выражает уверенность в чем-либо на 99,5 %, это событие происходит в 17 % случаев[68].

Калибровка Спока (N = 23)

Как видите, у него не очень хорошо получается. Единственный случай, когда высказывания Спока хорошо калиброваны, — это когда он называет нечто вероятным: такие прогнозы в самом деле сбываются примерно с частотой, соответствующей уровню его уверенности. Во всех остальных случаях предсказания Спока исполняются «с точностью до наоборот»: чем менее вероятным представляется какое-то событие по его словам, тем с большей вероятностью оно происходит, а чем больше он в чем-то уверен, тем с меньшей вероятностью это случается.

Хотите проверить, получится ли у вас лучше, чем у Спока? Вы можете проверить собственную калибровку и потренироваться в определении разницы между уровнями уверенности. Для этого ответьте на несколько серий вопросов из области общих знаний.

Ниже я привожу 40 вопросов, на которых вы можете практиковаться. Необязательно отвечать на все, но чем больше ответов вы дадите, тем более информативны будут ваши результаты.

Для каждого вопроса отметьте выбранный ответ, а затем — соответствующий уровень уверенности.

Поскольку у этих вопросов возможны только два ответа, ваш уровень уверенности будет варьироваться от 50 % (когда вы понятия не имеете, какой ответ правильный, и с тем же успехом могли бы подбрасывать монетку) до 100 % (когда вы совершенно уверены, что не ошибаетесь). Для простоты я указала пять уровней уверенности между этими крайними точками шкалы: 55 %, 65 %, 75 %, 85 % и 95 %. Отметьте тот, который ближе всего к степени вашей уверенности.

По мере продвижения по списку вопросов вы заметите, что ваш уровень уверенности колеблется. Некоторые вопросы покажутся легкими, и вы будете практически уверены в ответе. Но есть и другие вопросы, прочитав которые вы возденете руки к небу и воскликнете: «Да я понятия не имею!» Не пугайтесь. Помните, что цель этого упражнения — не доказать, что вы знаете все на свете, а научиться оценивать, сколько именно вы знаете.

Тренировка калибровки (отметьте правильные ответы)