- •Часть I
- •Снижение уровня шума при назначении наказаний
- •К разговору о шуме при вынесении приговоров
- •Лотерея, создающая шум
- •Ревизия шумовых помех выявляет системный шум
- •Нежелательный разброс против желаемого разнообразия
- •Иллюзия согласия
- •К разговору о системном шуме в страховой компании
- •Уникальные или типовые
- •Шум в уникальных решениях
- •Как контролировать шум в уникальных решениях
- •К разговору об уникальных решениях
- •Процесс вынесения суждения: пример
- •Цель суждения: внутренний сигнал
- •Как оценивается суждение: результат и процесс
- •Оценочные суждения
- •В чем проблема с шумом
- •Нежелательный, но поддающийся измерению
- •К разговору о профессиональных суждениях
- •Нужно ли компании GoodSell сокращать уровень шума?
- •Среднеквадратические значения
- •Уравнения расчета погрешности
- •Цена шума
- •Ревизия шумовых помех при назначении наказаний
- •Средний срок приговора
- •Лотерея при вынесении приговоров
- •Некоторые судьи особенно суровы: межэкспертный шум
- •Не все судьи одинаковы: внутриэкспертный шум
- •Составляющие шума
- •К разговору об анализе шума
- •Вторая лотерея
- •Измерение уровня ситуативного шума
- •Один в поле воин
- •Источники ситуативного шума
- •Определение масштабов ситуативного шума
- •Ситуативный шум, внутренние причины
- •К разговору о ситуативном шуме
- •Шум в музыке
- •Не только скачивание музыки
- •Каскады
- •Групповая поляризация
- •К разговору о групповых решениях
- •Часть III
- •Суждение или формула?
- •Пол Мил: оптимальная модель одерживает над вами верх
- •Голдберг: ваша модель одерживает над вами верх
- •К разговору об оценках и моделях
- •Больше простоты: грубые и прекрасные
- •Еще больше простоты: простые правила
- •Больше сложности: методы машинного обучения
- •Освобождение под залог: оптимальные решения
- •Почему мы не так часто используем правила?
- •Объективная неосведомленность
- •Излишне самоуверенные эксперты
- •Беспомощные эксперты и немногим лучшие модели
- •Отрицание неведения
- •К разговору об объективной неосведомленности
- •Прогнозирование жизненного пути
- •Понимание и прогнозирование
- •Каузальное мышление
- •Понимание в долине правдоподобности
- •Взгляд изнутри и взгляд со стороны
- •К разговору о границах понимания
- •Часть IV
- •Диагностика искажений
- •Подстановка
- •Предопределенность вывода
- •Избыточная когерентность
- •Психологические искажения как причина шума
- •К разговору об эвристике, искажениях и шуме
- •Сравнение и когерентность
- •Сравнение интенсивности
- •Искажения в сравнительных прогнозах
- •Шум в сравнительных прогнозах: пределы абсолютных оценок
- •К разговору о сравнениях
- •Гипотеза о возмущении
- •«Шумные» шкалы
- •Доллары и якорение
- •Неутешительные выводы
- •К разговору о шкалах
- •Задачи трудные и задачи легкие
- •Внутриэкспертный шум: постоянный или временный
- •Аналогия с чертами характера человека
- •К разговору о внутриэкспертном шуме
- •Компоненты шума
- •Систематизация компонентов шума
- •Объяснение ошибок
- •Шум как статистическое явление
- •К разговору об источниках шума
- •Эксперты и лидеры мнений
- •Интеллектуальные способности
- •Когнитивные стили
- •К разговору о «лучших судьях»
- •Предупреждать или исправлять?
- •Ограничения методов устранения искажений
- •Наблюдатель за процессом принятия решений
- •Снижение уровня шума: гигиена принятия решений
- •Отпечатки пальцев
- •Ситуативный шум в дактилоскопии
- •Насколько шум чреват ошибками?
- •Прислушиваясь к шуму
- •Управление информационным потоком
- •К разговору об управлении информационным потоком
- •Улучшение качества прогнозов
- •Проект «Верное суждение»
- •Вечная бета-версия
- •Шум и смещение в прогнозировании
- •В каких случаях срабатывают методы отбора и обобщения
- •К разговору об отборе и агрегировании
- •Общий обзор
- •Значение методических рекомендаций: снижение шума в медицине
- •Психиатрия – удручающий пример
- •К разговору о методических рекомендациях в медицине
- •Требуется суждение…
- •Старая проблема: в поисках решения
- •Аргументы в пользу суждений относительного характера
- •Ранжируем без принуждения
- •Что же дальше?
- •К разговору об определении шкалы оценки профессиональной эффективности
- •Риски интервью
- •Шум при собеседованиях
- •Психология интервьюера
- •Структурирование как метод оптимизации подбора персонала
- •К разговору о структурировании процесса найма персонала
- •Первая встреча: согласование подхода
- •Вторая встреча: определение факторов для промежуточных оценок
- •Команда аналитиков
- •Решающее совещание
- •Протокол промежуточных оценок при типовых решениях
- •Перемены, которые вносит протокол
- •К разговору о протоколе промежуточных оценок
- •Меньше шума – больше ошибок?
- •«Бесшумные» предвзятые алгоритмы
- •К разговору о цене снижения шума
- •Изменение системы ценностей
- •Обман системы и обход правил
- •Предупреждение правонарушений Аппетит к риску
- •Творческое начало, моральный настрой и свежие идеи
- •К разговору о достоинстве
- •Неоднородность и неосведомленность
- •Боссы и контроль над подчиненными
- •Возврат вытесненного
- •Обоснование концепции
- •Объявим шум вне закона?
- •К разговору о правилах и стандартах
- •Суждения
- •Ошибки: смещение и шумовые помехи
- •Измерение смещения и шума
- •Шум – серьезная проблема
- •Разновидности шума
- •Психология суждений и влияние шума
- •Шум – «вещь в себе»
- •Как снизить уровень шума и влияние искажений
- •Допустимое количество шума
- •Подготовка материалов исследования
- •Предварительная встреча с руководством компании
- •Проведение исследования
- •Анализ и выводы
- •Чек-лист для выявления искажений
- •Выражение признательности
- •Об авторах
- •Примечания
получить «добро» на его применение235. Нельзя не отметить, что чек-лист никогда не содержит исчерпывающего списка искажений, а лишь наиболее часто возникающие проблемы с наиболее серьезными последствиями.
Наблюдение за принятием решений с помощью чек-листа поможет ограничить влияние возможных искажений. Мы изучали некоторые эксперименты такого рода и убедились в их обнадеживающих результатах. Тем не менее мы не располагаем информацией о систематических исследованиях данного подхода и не в состоянии взвесить все «за» и «против» в отношении различных вариаций. В то же время есть надежда, что испытания метода устранения искажений с помощью наблюдателей будут проводиться в дальнейшем как практиками, так и учеными.
Снижение уровня шума: гигиена принятия решений
Искажение – ошибка, которую мы часто замечаем и даже можем объяснить. Отклонения направлены в ту или иную сторону; именно поэтому изменение среды способно ограничить их губительное влияние, а попытки оптимизировать качество суждений методами бустинга помогают предотвратить определенные искажения. Чаще всего отклонение бросается в глаза, поэтому есть надежда, что наблюдатель заметит его в процессе, пока окончательное решение еще не при-
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
нято.
С другой стороны, шумовые помехи – ошибка непредсказуемая, которую нелегко обнаружить и сложно объяснить, и мы часто отрицаем само наличие шума, несмотря на причиненный им критический ущерб. По этой причине стратегии снижения шумового фона при принятии решений имеют не меньшее значение, чем предоперационная обработка в медицине. Цель преследуется одна и та же: поставить заслон неопределенному кругу потенциальных ошибок, прежде чем они и в самом деле случатся.
Подобный подход мы называем гигиеной принятия решений. Вы моете руки, не зная наверняка, какой именно микроб удаляете с кожи; просто сознаете, что гигиена – прекрасная мера профилактики против целого ряда болезнетворных бактерий (в период пандемии тем более). Гигиена принятия решений также означает, что вы принимаете на веру необходимость снижения шумовых помех, не представляя, каких именно ошибок хотите избежать.
Мы намеренно использовали аналогию с мытьем рук. Гигиенические мероприятия утомительны. Их выгоды неочевидны, поскольку вы не в состоянии сказать точно, какую именно проблему предотвратили. И напротив, когда проблема возникает, порой сложно проследить ее связь с определенным сбоем процедур гигиены. Именно поэтому непросто заставить людей систематически мыть руки – даже профессионалов в области здравоохранения, которые прекрас-
но осведомлены о важности гигиенических процедур. Подобно мытью рук и иным профилактическим мерам,
гигиена принятия решений неоценима, хотя и выглядит делом неблагодарным. Исправление четко идентифицированного искажения по крайней мере дает нам осязаемое ощущение успеха. Процедуры снижения шумового фона таких ощущений не оставляют. Тем не менее с точки зрения статистики они предотвращают большое количество ошибок, хотя вы и не знаете, каких именно. Шум – невидимый враг, и, отразив его атаки, мы одержим невидимую победу.
Учитывая, какой ущерб может нанести шум, незримая битва оправдана. В следующих главах мы представим несколько стратегий гигиены принятия решений, применяемых во многих сферах, в том числе в криминалистике, аналитике, медицине и кадровых вопросах. В главе 25 мы приведем обзор таких стратегий и покажем, как их задействовать в комбинированном подходе к подавлению шумовых помех.
Кразговору об устранении искажений
игигиене принятия решений
«Знаете ли вы, с каким именно искажением боретесь, в каком направлении оно может повлиять на результат? Если нет, возможно, ваш проект столкнулся с несколькими видами искажений, и неясно, какое из них одержит верх».
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
«Прежде чем начать обсуждение решения, давайте выберем наблюдателя за процессом».
«Мы четко соблюдали гигиенические меры при обсуждении данного решения, значит, высока вероятность, что решение принято оптимальное».
Глава 20 Управление информационным
потоком в криминалистике
В марте 2004 года произошла серия взрывов в пригородном поезде, следующем из Мадрида. Погибло 192 человека и более 2000 получили ранения. На месте преступления обнаружили отпечаток пальца на полиэтиленовом пакете, и испанцы направили улику через Интерпол во все правоохранительные органы мира. Несколько дней спустя специалисты криминалистической лаборатории ФБР неопровержимо идентифицировали владельца отпечатка – некоего Брэндона Мэйфилда, гражданина США, проживающего в Орегоне.
Лучшего кандидата на роль подозреваемого не приходилось и желать. Отслужив в вооруженных силах США, бывший военный женился на египтянке и обратился в ислам. Имея юридическое образование, Мэйфилд представлял интересы обвиняемых (и впоследствии осужденных) экстремистов, пытавшихся пробраться в Афганистан с намерением вступить в ряды Талибана. ФБР в свое время включило Брэндона в перечень лиц, потенциально связанных с террористической деятельностью.
За Мэйфилдом установили наблюдение, его дом напичкали микрофонами, телефон поставили на прослушку. Слежка
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
не принесла никакой существенной информации, и ФБР в итоге решило задержать подозреваемого. Впрочем, обвинение ему так и не предъявили. Выяснилось, что на протяжении последних десяти лет он не покидал пределы Штатов. Мэйфилд находился в следственном изоляторе, когда испанские следователи, уже уведомившие ФБР о том, что не считают его отпечаток пальца идентичным образцу на пакете, сообщили американским коллегам: установлено идеальное совпадение с другим лицом.
Через две недели Мэйфилда освободили. Правительство США принесло ему свои извинения, выплатив в качестве компенсации два миллиона долларов, после чего организовало всестороннее расследование обстоятельств допущенной ошибки. Окончательный вывод звучал так: «Ошибка
вызвана «человеческим фактором»236. Методологических и технических сбоев не выявлено».
К счастью, подобные промахи в силу человеческого фактора достаточно редки, и все же каждый из них поучителен. Каким образом лучшие американские дактилоскописты ошибочно идентифицировали образец на пакете с отпечатком пальца человека, который и близко не был к месту преступления? Мы ответим на этот вопрос, изучив сам процесс исследования папиллярных узоров и поняв, что в нем общего с иными примерами вынесения профессионального суждения. Итак, дактилоскопия, которую мы привыкли воспринимать как науку точную, на самом деле подвержена вли-