- •Часть I
- •Снижение уровня шума при назначении наказаний
- •К разговору о шуме при вынесении приговоров
- •Лотерея, создающая шум
- •Ревизия шумовых помех выявляет системный шум
- •Нежелательный разброс против желаемого разнообразия
- •Иллюзия согласия
- •К разговору о системном шуме в страховой компании
- •Уникальные или типовые
- •Шум в уникальных решениях
- •Как контролировать шум в уникальных решениях
- •К разговору об уникальных решениях
- •Процесс вынесения суждения: пример
- •Цель суждения: внутренний сигнал
- •Как оценивается суждение: результат и процесс
- •Оценочные суждения
- •В чем проблема с шумом
- •Нежелательный, но поддающийся измерению
- •К разговору о профессиональных суждениях
- •Нужно ли компании GoodSell сокращать уровень шума?
- •Среднеквадратические значения
- •Уравнения расчета погрешности
- •Цена шума
- •Ревизия шумовых помех при назначении наказаний
- •Средний срок приговора
- •Лотерея при вынесении приговоров
- •Некоторые судьи особенно суровы: межэкспертный шум
- •Не все судьи одинаковы: внутриэкспертный шум
- •Составляющие шума
- •К разговору об анализе шума
- •Вторая лотерея
- •Измерение уровня ситуативного шума
- •Один в поле воин
- •Источники ситуативного шума
- •Определение масштабов ситуативного шума
- •Ситуативный шум, внутренние причины
- •К разговору о ситуативном шуме
- •Шум в музыке
- •Не только скачивание музыки
- •Каскады
- •Групповая поляризация
- •К разговору о групповых решениях
- •Часть III
- •Суждение или формула?
- •Пол Мил: оптимальная модель одерживает над вами верх
- •Голдберг: ваша модель одерживает над вами верх
- •К разговору об оценках и моделях
- •Больше простоты: грубые и прекрасные
- •Еще больше простоты: простые правила
- •Больше сложности: методы машинного обучения
- •Освобождение под залог: оптимальные решения
- •Почему мы не так часто используем правила?
- •Объективная неосведомленность
- •Излишне самоуверенные эксперты
- •Беспомощные эксперты и немногим лучшие модели
- •Отрицание неведения
- •К разговору об объективной неосведомленности
- •Прогнозирование жизненного пути
- •Понимание и прогнозирование
- •Каузальное мышление
- •Понимание в долине правдоподобности
- •Взгляд изнутри и взгляд со стороны
- •К разговору о границах понимания
- •Часть IV
- •Диагностика искажений
- •Подстановка
- •Предопределенность вывода
- •Избыточная когерентность
- •Психологические искажения как причина шума
- •К разговору об эвристике, искажениях и шуме
- •Сравнение и когерентность
- •Сравнение интенсивности
- •Искажения в сравнительных прогнозах
- •Шум в сравнительных прогнозах: пределы абсолютных оценок
- •К разговору о сравнениях
- •Гипотеза о возмущении
- •«Шумные» шкалы
- •Доллары и якорение
- •Неутешительные выводы
- •К разговору о шкалах
- •Задачи трудные и задачи легкие
- •Внутриэкспертный шум: постоянный или временный
- •Аналогия с чертами характера человека
- •К разговору о внутриэкспертном шуме
- •Компоненты шума
- •Систематизация компонентов шума
- •Объяснение ошибок
- •Шум как статистическое явление
- •К разговору об источниках шума
- •Эксперты и лидеры мнений
- •Интеллектуальные способности
- •Когнитивные стили
- •К разговору о «лучших судьях»
- •Предупреждать или исправлять?
- •Ограничения методов устранения искажений
- •Наблюдатель за процессом принятия решений
- •Снижение уровня шума: гигиена принятия решений
- •Отпечатки пальцев
- •Ситуативный шум в дактилоскопии
- •Насколько шум чреват ошибками?
- •Прислушиваясь к шуму
- •Управление информационным потоком
- •К разговору об управлении информационным потоком
- •Улучшение качества прогнозов
- •Проект «Верное суждение»
- •Вечная бета-версия
- •Шум и смещение в прогнозировании
- •В каких случаях срабатывают методы отбора и обобщения
- •К разговору об отборе и агрегировании
- •Общий обзор
- •Значение методических рекомендаций: снижение шума в медицине
- •Психиатрия – удручающий пример
- •К разговору о методических рекомендациях в медицине
- •Требуется суждение…
- •Старая проблема: в поисках решения
- •Аргументы в пользу суждений относительного характера
- •Ранжируем без принуждения
- •Что же дальше?
- •К разговору об определении шкалы оценки профессиональной эффективности
- •Риски интервью
- •Шум при собеседованиях
- •Психология интервьюера
- •Структурирование как метод оптимизации подбора персонала
- •К разговору о структурировании процесса найма персонала
- •Первая встреча: согласование подхода
- •Вторая встреча: определение факторов для промежуточных оценок
- •Команда аналитиков
- •Решающее совещание
- •Протокол промежуточных оценок при типовых решениях
- •Перемены, которые вносит протокол
- •К разговору о протоколе промежуточных оценок
- •Меньше шума – больше ошибок?
- •«Бесшумные» предвзятые алгоритмы
- •К разговору о цене снижения шума
- •Изменение системы ценностей
- •Обман системы и обход правил
- •Предупреждение правонарушений Аппетит к риску
- •Творческое начало, моральный настрой и свежие идеи
- •К разговору о достоинстве
- •Неоднородность и неосведомленность
- •Боссы и контроль над подчиненными
- •Возврат вытесненного
- •Обоснование концепции
- •Объявим шум вне закона?
- •К разговору о правилах и стандартах
- •Суждения
- •Ошибки: смещение и шумовые помехи
- •Измерение смещения и шума
- •Шум – серьезная проблема
- •Разновидности шума
- •Психология суждений и влияние шума
- •Шум – «вещь в себе»
- •Как снизить уровень шума и влияние искажений
- •Допустимое количество шума
- •Подготовка материалов исследования
- •Предварительная встреча с руководством компании
- •Проведение исследования
- •Анализ и выводы
- •Чек-лист для выявления искажений
- •Выражение признательности
- •Об авторах
- •Примечания
Глава 18 Лучший судья – лучшее суждение
До сих пор мы говорили о судьях, не заостряя внимание на их индивидуальных отличиях. Очевидно, что в ситуации, когда требуется сформулировать мнение, кто-то с подобной ответственностью справится, а кто-то потерпит неудачу. Обобщенное суждение по принципу «мудрости толпы» может оказаться более точным, если «толпа» состоит из ком-
петентных людей196. Сразу возникает важный вопрос: как определить наиболее квалифицированных кандидатов?
Отметим три значимых фактора. Суждение содержит меньше шума и искажений, если судьи обладают должной подготовкой, высоким интеллектом и правильным когнитивным стилем. Иными словами, верное суждение зависит от багажа накопленных знаний, эффективности мыслительных процессов и стиля мышления. «Хороший судья» в общем случае отличается опытом и интеллектом, но не только: он еще и обладает активным открытым мышлением, а также стремится извлекать пользу из поступающей информации.
Эксперты и лидеры мнений
Рискуем повториться, и все же: профессионализм судей
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
определяет качество их суждений. Допустим, опытный рентгенолог, скорее всего, верно диагностирует пневмонию; мы также знаем суперпредсказателей в области политического анализа, которые, вне всяких сомнений, дадут более точный прогноз, чем их менее мастеровитые коллеги. Предположим, что мы собрали группу юристов – признанных экспертов в конкретной сфере законодательства. Подобная группа наверняка придет к единому мнению и даст правильный прогноз в отношении исхода конкретного судебного процесса. Настоящие профессионалы производят меньше шума и менее склонны к смещению.
Такого рода специалисты – несомненные эксперты в своей узкой сфере. Их превосходство над коллегами несложно подтвердить достигнутыми ранее результатами. Как минимум мы можем выбрать врача, аналитика или адвоката, руководствуясь их успешной работой в прошлом. (По очевидным причинам на практике такой подход затруднителен; к примеру, не стоит выбирать кандидатуру семейного врача лишь на основании результатов его квалификационного экзамена.)
Мы уже отмечали, что во многих случаях правильность суждения подтвердить сложно. В ряде областей нелегко понять и безошибочно определить истину, на которую претендует то или иное суждение. Отнесем в эту категорию классификацию заемщика и приговор правонарушителю, дегустацию вин и оценку за сочинение, рецензии на фильмы и книги. Подобных областей несчетное множество, и все же в
каждой из них периодически появляются уважаемые эксперты. Доверие, которое мы к ним питаем, опирается на признание их авторитета коллегами. Назовем таких людей лиде-
рами мнений.
Применяя данный термин, мы не задаемся целью кого-ли- бо обидеть или покритиковать. Точность оценок ряда авторитетных экспертов просто не подвергается сомнению, и это факт, который действует во многих сферах. Многие профессора, ученые и консультанты по управлению бизнесом считаются лидерами мнений. Им верят, и вера основана на уважении учеников, коллег или клиентов. Во многих областях суждение профессионала по ряду вопросов можно сравнить лишь с аналогичными мнениями его коллег.
Не располагая необходимыми знаниями для того, чтобы достоверно определить, кто из оппонентов на самом деле прав, чаще всего мы полагаемся на суждение лидеров мнений – даже в тех случаях, когда они друг другу противоречат. Представим себе круглый стол, за которым несколько политических аналитиков выражают диаметрально противоположные точки зрения на причины и перспективы дипломатического кризиса. Довольно обычная ситуация, не так ли? Разве интересно, когда участники «круглого стола» единодушны? Каждый из аналитиков полагает, что есть единственно верная точка зрения, и каждый уверен, что его теория к ней максимально близка. Мы приходим к выводу, что некоторые из участников обсуждения производят на нас
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
наиболее благоприятное впечатление; их аргументы в равной степени убедительны. Однако кто из них прав? Если теории, которые они высказывают, не поддаются формальной итоговой проверке, мы можем никогда и не узнать правды. Во всяком случае, мы сознаем, что некоторые из дискутирующих наверняка ошибаются – иначе откуда взяться спору? Тем не менее мы с уважением относимся к их специфическому опыту.
Возьмем еще одну группу экспертов. Каждый из них – отлично подготовленный философ, занимающийся проблемами нравственности. И вот они встречаются лицом к лицу. Первый относится к школе Иммануила Канта, второй – приверженец учения Джереми Бентама, а третий – последователь Аристотеля. Вся троица вступает в ожесточенный спор по вопросам морали: допустим ли обман в принципе, и если да – в каких именно случаях; есть ли права у животных; в чем цель наказания за преступление. Мы внимательно прислушиваемся к полемике, восхищаемся четкостью и точностью логики наших философов. Склоняясь к тому, чтобы согласиться с одним из спорщиков, мы в то же время отдаем должное каждому из них.
Отчего мы так реагируем? Сформулируем вопрос шире: почему человек, которого уважают за качество его суждений, считает экспертом другого, если абсолютно не располагает доказательствами его объективной правоты? Что делает человека лидером мнений?
Частично ответ заключается в том, что у нас с этим экспертом общие взгляды на жизнь; возможно, мы принадлежим к одному и тому же направлению. Нередко эксперт достигает своего уровня, получая подготовку под наблюдением наставников из той же компании, где потом начинает трудовую деятельность. Врач, заканчивающий ординатуру, и молодой адвокат, усваивающий уроки старшего партнера, не просто впитывают азы мастерства; обоих обучают использовать определенные методы и следовать конкретным правилам.
Общие нормы способствуют приобретению рефлекса: какие именно сигналы следует учитывать, как выносить и обосновывать окончательное суждение. Например, специалисты по урегулированию убытков из страховой компании будут единодушны при согласовании существенных нюансов, которые следует включить в перечень контрольных вопросов для оценки претензии клиента.
В то же время два подобных специалиста, получив абсолютно идентичную информацию, могут серьезно разойтись во мнениях по поводу итогового решения по претензии
– ведь правила не содержат полного описания дальнейших действий. Не существует рецепта, которого следует придерживаться бездумно; эксперту оставляют простор для интерпретации данных. В таких случаях, когда все решается не путем вычислений, а экспертным мнением, неизбежно возникнет шумовой фон. Специалисты с одинаковым уровнем
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/