Искажение результатом

Outcome bias · отклонение в сторону результата, оценка решения по исходу

КомандаДоказательность B — надёжно, с оговоркамиНе хватает смысла

Решение судят по тому, чем всё кончилось, а не по тому, что было известно в момент выбора.

Как работает

Исход перед глазами, а обстоятельства выбора уже нет, и Система 1 оценивает то, что видит. Удачу засчитывают как мастерство, невезение — как ошибку. Люди понимают, что так судить нельзя, и всё равно так судят.

Механизм: Что видишь, то и есть. Из того, что попало в поле зрения, строится самая связная история. Уверенность растёт от связности истории, а не от объёма и качества данных. Чего нет перед глазами, того для суждения нет. (Канеман, гл. 7, 19–24)

Классический опыт

Барон и Херши, 1988. Студентам описывали решения врачей и игроков в условиях неопределённости и давали всё, что знал сам решающий. При плохом исходе то же решение оценивали как хуже обдуманное, а решающего — как менее компетентного.

В дизайне

Продукт

Команда

Фича вышла без исследования и выстрелила. Команда решает, что исследования только тормозят, и не спрашивает, сколько похожих запусков без них провалилось.

Коммуникация

Команда

Провокационная тема рассылки дала рекордную открываемость, и агентство делает провокацию правилом. Сколько отписок приносят такие письма в среднем, никто не смотрел.

Управление

Команда

Канеман приводит опрос калифорнийских студентов: стоило ли городу Дулут платить за круглосуточное наблюдение за мостом на случай затора и паводка. Зная только данные на момент решения, «да» ответили 24 %, узнав о наводнении — 56 %.

Команда

Дизайнер настоял на рискованном редизайне, и метрика выросла вместе с сезоном. Его хвалят за смелость, а коллегу, чьё обоснованное решение совпало с падением рынка, на ревью ругают.

Связи

  • Общий ход мысли. Результат приписывают людям и не учитывают обстоятельств (Эберст и Имхоф, 2023).

  • Усиливается этим. Успешную компанию задним числом хвалят за всё подряд: ореол в бизнесе (Канеман, гл. 19).

  • Усиливает это. Исход кажется предсказуемым, значит, тот, кто его не предвидел, решал плохо (Канеман, гл. 19).

  • Усиливается этим. Боясь, что решение осудят по исходу, выбирают безопасное «по протоколу» (Канеман, гл. 19).

Противоядия

  • Журнал решений. Записывать решение, ожидаемый результат, его вероятность и доводы. После релиза сверить запись с фактом и оценить само рассуждение: хороший исход мог сложиться случайно.
  • Широкая рамка. Смотреть на решение как на одно из серии похожих и принять общее правило для всей серии. Заранее договориться, как часто смотреть на итог, и не обсуждать дневные колебания между проверками.
  • Разбор без виноватых. Разбирать сбой вопросом «что в системе позволило ошибке случиться?» и не искать виноватого. Судить решения по тому, что люди знали в тот момент; исход, известный теперь, в оценку не брать.

Источники