Психология оценки и принятия решений
Шрифт:
Несоответствие между точностью и уверенностью не зависит от умственного развития респондента.
Несмотря на то что первые критики этой работы писали, что эти результаты во многом являются порождением вопросов, которые были неясными или бессмысленными, последующие исследования показали, что факты Лихтенштейн и Фишхоффа подтверждаются и при использовании более обыденных, знакомых респондентам тем. Например, в серии экспериментов, включавшей более 10000 отдельных оценок, Ли Росс и его коллеги обнаружили, что люди на 10- 15% переоценивали точность своих ответов, когда их просили предсказать свое поведение и поведение других людей (Даннинг, Гриффин, Милойкович и Росс, 1990; Валлон, Гриффин, Лин и Росс, 1990).
Нельзя сказать, что люди всегдаизлишне самоуверенны. Давид Роунис и Фрэнк Йетс в 1987 году обнаружили, например, что самоуверенность частично зависит от того, как оценивать уверенность и какой тип оценки был сделан (суждения из области общего знания обычно выносятся с относительно высокой уверенностью). Существуют также некоторые основания считать, что игроки в бридж, профессиональные оценщики, работники метеорологической службы — все, кто получает регулярную обратную связь на свои оценки, — не склонны к излишней самоуверенности (Керен, 1987; Лихтенштейн, Фишхофф и Филлипс, 1982; Мерфи и Браун, 1984; Мерфи и Уинклер, 1984). Однако большая часть исследований свидетельствует о том, что переоценка присутствует всегда.
Экстремальная самоуверенность
Если люди уверены в правильности ответа, насколько часто они имеют для этого основания? В 1977 году Барух Фишхофф, Поль Словик и Сара Лихтенштейн провели серию экспериментов, чтобы ответить на этот вопрос. В первом опыте респонденты отвечали на сотни вопросов из области общего знания и оценивали вероятность того, что их ответы верны. Например, ответив (273:) на вопрос, является ли абсент ликером или минералом, они оценивали свою уверенность по шкале от 50% до 100% (эта проблема приведена в п. 21 Анкеты). Фишхофф, Словик и Лихтенштейн проверяли правильность только тех ответов, в которых респонденты были абсолютно уверены.
Они обнаружили, что люди отвечали верно в 70—85% таких случаев. Насколько были уверены вы в вашем ответе на вопрос п. 21? Правильный ответ: абсент — это ликер, но многие люди путали его название с названием камня аметиста.
Чтобы быть уверенными в том, что их результаты не являются порождением неверных представлений о вероятности, Фишхофф, Словик и Лихтенштейн в 1977 году провели второй эксперимент, в котором самоуверенность оценивалась в форме пропорции, отношения. Испытуемым в этом эксперименте давалось более 100 пунктов, в каждом указывалось две причины смерти, например, лейкемия и вождение машины. Их просили определить, от чего в США умирают чаще, и назвать вероятность того, что они правы, в виде отношения (например, 2:1, 3:1 и т.д.). Таким образом, испытуемые могли не путаться с процентами вероятности и говорить вместо 75%, что они оценивают шансы того, что они правы, как 3:1.
Словик, Фишхофф и Лихтенштейн обнаружили, что точность и уверенность вполне соответствовали друг другу, пока уверенность не превышала 3:1, но если она вырастала до значения от 3:1 до 100:1, точность оказывалась значительно ниже. Когда люди говорили, что они правы и уверены в этом на 100 против 1, они были точны в ответах в среднем на 75%. Если же уверенность колебалась от 10000 против I до 1000000 против 1 — просто невероятных величин — точность ответов достигала 85- 90% (что примерно соответствует уверенности от 6:1 до 9:1)*.
И наконец, в качестве последнего штриха, необходимого для уверенности в том, что испытуемые понимают и воспринимают задачу серьезно, Фишхофф, Словик и Лихтенштейн провели три беседы. В одной из них отношения между случаем и вероятностью были тщательно разъяснены в двадцатиминутной лекции.
* Несмотря на то что эти результаты могут показаться противоречащими предыдущим открытиям, сделанным Лихтенштейн и Фишхоффом (где речь, в частности, шла о том, что переоценка минимальна, если точность превышает 85%), на самом деле противоречия нет. Тот факт, что субъекты были только на 70- 90% точны, будучи при этом уверенными в своей правоте, не означает, что они всегда были слишком уверены, будучи правы на 70- 90%. (274:)
Испытуемым давали таблицу, показывавшую взаимосвязь между оценкой в виде отношения и вероятностью, и рассказывали о тонкостях выражения неуверенности при помощи отношений (приводились специальные примеры использования отношений между 2:1 и 1:1 для выражения неуверенности). Даже после этих инструкций испытуемые выражали невероятную уверенность в своих ответах. Они давали отношение никак не меньше 50:1, когда оно должно было быть равно 4:1, и 100:1, если на самом деле оно было 5:1.
В другом опыте испытуемых спрашивали, согласны ли они держать денежное пари по поводу верности тех ответов, в которых они сами оценят ее как 50:1. Из 42 испытуемых 39 сказали, что приняли бы предложение — несмотря на то что их ложная самоуверенность должна была привести к потере почти 140 долларов. В последней беседе Фишхофф, Словик и Лихтенштейн действительно заключали с испытуемыми пари. В этом опыте 13 из 19 испытуемых согласились поставить деньги на точность своих ответов, даже если они были неправы в ответах на 12% вопросов, точность которых оценили как 50:1 и выше (проигрыш должен был составить от 1 до 11 долларов, и экспериментаторы намеревались отдавать деньги). Эти результаты показали, что: 1) люди самоуверенны, даже если их правота — кажущаяся; 2) самоуверенность — это не просто результат восприятия задачи как легкой или непонимание того, как составляются оценки точности. Кроме того, Джоан Сибер в 1974 году обнаружила, что самоуверенность возрастает вместе с желанием показать хорошие результаты.
Когда самоуверенность становится уголовным преступлением
Склонны ли люди к переоценке, если ставка превышает несколько долларов? Несмотря на то что соображения этического характера, очевидно, в ограниченных рамках можно исследовать в лабораторных условиях, есть по крайней мере одно свидетельство того, что переоценка может возникнуть, даже если на карту поставлена человеческая жизнь. Это свидетельство получено при исследованиях, связанных со смертной казнью.
В исчерпывающем обзоре несправедливых приговоров Хьюго Бедау и Майкл Раделет в 1987 году обсуждали 350 (275:) зафиксированных в США случаев, в которых ложно обвиненные в уголовных преступлениях, несмотря на то что обвинения «вызывали обоснованные сомнения», были осуждены. В пяти случаях ошибка была обнаружена до вынесения окончательного приговора. Другим обвиняемым повезло меньше: 67 были заключены в тюрьмы на срок до 25 лет, 139 — на срок более 25 лет и 139 были приговорены к смерти. На тот момент, когда Бедау и Раделет писали свой обзор, 23 человека из приговоренных уже были казнены.
Градуирование
«Градуирование» — это согласование уверенности и точности. Человек, принимающий решение, может считать свою градуировку совершенной, если во всех оценках уровня уверенности отношение точности равно вероятности правоты. Другими словами, 90% всех оценок верны — 90% уверенности в том, что ответы верны; 80% оценок верны — 80% уверенности в ответах и т.д.
Когда оценки индивидуальны, особого смысла говорить о градуировании нет. Насколько хорошо градуировано решение человека, ответившего 70% на вопрос п. 216 Анкеты? Градуировка важна, когда речь идет о сотнях оценок (Лихтенштейн, Фишхофф и Филлипс, 1982).
Поскольку существует множество способов измерения уверенности, существует ряд методик измерения градуировки. Одна из них — обычный подсчет разницы между средним уровнем уверенности и общей пропорцией правильных ответов. Скажем, человек имеет 80% уверенности в своих ответах на ряд вопросов из области общего знания, но правильно ответил только на 60%. Этот субъект переоценил свои силы на 20%.
Несмотря на то что такой способ градуирования очень удобен, он не всегда может быть применен. Представьте себе, например, человека, уверенность и точность оценок которого равны 80% каждая. Этот человек обладает совершенной градуировкой? Необязательно. Он мог быть на 60% уверен в половине ответов и на 100% — в другой половине (в среднем — 80% уверенности), а верно ответить на 80% вопросов и в первой, и во второй половине. Такой человек имеет заниженную самооценку, когда уверен в 60% ответов, и завышенную, когда уверен во всех. (276:)
Более совершенной методикой является оценка точности через ряд условий уверенности. Если точность подсчитывается для разных уровней уверенности, то появляется возможность создать «кривую градуирования», где горизонтальная ось будет обозначать уверенность, а вертикальная — точность. Рисунок 19.2 содержит две кривые градуирования: одна — для предсказания метеослужбами выпадения осадков, другая — для диагнозов пневмонии. Как вы можете видеть, предсказания погоды почти
Рисунок 19.2
Этот рисунок содержит кривые градуирования для прогнозов погоды (незакрашенные кружки) и диагнозов пневмонии (закрашенные кружки). В то время как прогнозы погоды почти безупречно проградуированы, врачи демонстрируют чрезмерную самоуверенность (при наличии или отсутствии у пациента пневмонии). Данные о прогнозах погоды взяты из отчета Аллана Мерфи и Роберта Уинклера (1984), а данные о врачах — из исследования Джей Кристенсен- Шалански и Джеймса Бушихеда (1981).