[факт, ядро приёма] Kahneman & Klein (2009) формулируют условие валидной интуиции как проверяемую пару: «The recognition model implies two conditions that must be satisfied for an intuitive judgment (recognition) to be genuinely skilled: First, the environment must provide adequately valid cues to the nature of the situation. Second, people must have an opportunity to learn the relevant cues» (с. 520); в выводах — то же самое как необходимое, но не достаточное условие: «An environment of high validity is a necessary condition for the development of skilled intuitions. Other necessary conditions include adequate opportunities for learning the environment (prolonged practice and feedback that is both rapid and unequivocal)» (с. 524).
[факт, определение и примеры] «Validity... describes the causal and statistical structure of the relevant environment... it is very likely that there are early indications that a building is about to collapse in a fire... it is unlikely that there is publicly available information that could be used to predict how well a particular stock will do» (с. 520) — отсюда: «we have more reason to trust the intuition of an experienced fireground commander... than to trust the intuitions of a trader about a stock». Там же — «wicked environments» (Hogarth 2001): врач начала XX века уверенно распознавал тиф по пальпации языка, но сам заражал пациентов немытыми руками — обратная связь была искажена его же действием. Долгосрочный политический прогноз — пример «zero-validity»: эксперты Tetlock «were not superior to untrained readers of newspapers... the problem is in the environment: Long-term forecasting must fail because large-scale historical developments are too complex to be forecast».
[оговорка, уверенность — не индикатор] «Subjective confidence is therefore an unreliable indication of the validity of intuitive judgments and decisions» (с. 523) — высокая уверенность эксперта не заменяет проверку среды.
[факт, профессии по валидности] Со ссылкой на Shanteau (1992): валидная экспертиза — «livestock judges, astronomers, test pilots... chess masters... insurance analysts»; слабая — «stockbrokers, clinical psychologists, psychiatrists... court judges... intelligence analysts» (с. 522); «fractionated expertise» — часть профессий валидна в одних задачах и нет в других.
[факт, независимая линия] Klein (2008): «the percentage of RPD strategies generally ranged from 80% to 90%» у пожарных командиров, репликации у шахматистов (с. 458) — RPD построена на «репертуаре паттернов» из практики, то есть неявно требует той же валидной среды, что и условие KK09.
[факт, опыт сам по себе не помогает без валидной среды] Buehler, Griffin & Ross (1994), после серии экспериментов о том, помогает ли напоминание о прошлых похожих проектах точнее прогнозировать сроки: «On the basis of the present studies, we do not yet have compelling evidence that individuals can use their recollections of their own past performances to improve the accuracy of their time estimates» (с. 380) — при этом отдельно отмечают, что улучшение возможно, только «if participants' recollections are valid and if their present task is comparable with the projects that they recall» (с. 380) — то есть снова упирается в валидность и сравнимость среды, не просто в наличие опыта.
[факт, диагностический аргумент от противного] Flyvbjerg (2002) использует отсутствие улучшения как диагностику: если оценки затрат инфраструктурных проектов не становятся точнее за 70 лет практики целой профессии, чисто психологическое объяснение («appraisal optimism», которое должно ослабевать по мере накопления опыта) подозрительно: «given the fact that the human psyche is distinguished by a significant ability to learn from experience, it seems unlikely that promoters and forecasters would continue to make the same mistakes decade after decade instead of learning from their actions... But our data clearly shows that this has not happened» (с. 17–18) — вывод автора: раз обучение не происходит, вероятная причина — не когнитивная ошибка при валидной обратной связи, а структура стимулов, искажающая саму обратную связь (strategic misrepresentation, см. СП-03 Когнитивное или политическое Flyvbjerg vs критики).
Приём: перед тем как довериться интуиции опытного специалиста (своей или чужой) в конкретной задаче — явно проверить два условия: (1) есть ли в этой среде устойчивые, объективно идентифицируемые причинные связи между сигналом и исходом; (2) была ли у человека возможность выучить именно эти сигналы через длительную практику с быстрой и однозначной обратной связью. Механизм: отделяет распознавание паттерна (валидное в «kind»-средах) от иллюзии распознавания, которая в «wicked»-средах или средах с нулевой предиктивной валидностью выглядит субъективно так же уверенно, но не является таковой (KK09, с. 520–524). Критерий «сработало»: качественный, по структуре критериев — не формальная шкала; ближайшая количественная опора — контраст «профессии высокой валидности» (метеорологи, шахматисты — RPD 80–90 %, Klein 2008, с. 458) против «профессии низкой валидности» (долгосрочные политические прогнозисты — не лучше читателей газет, Tetlock через KK09, с. 520). Замер: [прямого РКИ самого «аудита» не найдено]; опора — контрастные примеры и мета-наблюдение Grove et al. (алгоритм не хуже эксперта в 128 из 136 сравнений — ПР-13 Алгоритмы и структурированные процедуры) как косвенный маркер того, что там, где валидность среды ограничена, формальная модель безопаснее интуиции. Где не работает / побочные: определение валидности среды «не всегда легко» даже для исследователей задним числом (KK09 про Tetlock, с. 520): нельзя заранее гарантированно отличить «kind» от «wicked» без длительного наблюдения; собственный опыт не гарантирует улучшения прогноза, даже если он большой (Buehler et al. 1994, с. 380); отсутствие улучшения за десятилетия само по себе не доказывает невалидность среды — может быть структурным стимулом к искажению (Flyvbjerg 2002). Цена внедрения: не выражена в деньгах; по сути — требует времени на диагностику среды до принятия решения о том, доверять ли суждению, а не после.
(б) Процедура. Перед тем как опереться на интуицию — свою или чужую — в конкретной задаче: есть ли здесь стабильные причинные признаки, и была ли у человека практика именно в такой среде с быстрой обратной связью? Если оба ответа «да» — интуиции можно доверять; если нет — предпочесть структурированную процедуру или алгоритм (ПР-13 Алгоритмы и структурированные процедуры). Измеренного противоядия «как провести аудит» нет — ближайшее подтверждение: контрастные профессиональные примеры (KK09, с. 522) и отсутствие пользы от голого опыта без валидности (Buehler 1994, с. 380). (в) Среда. Ядро приёма: диагностика среды через два критерия KK09 — валидность и обучаемость (длительная практика + быстрая однозначная обратная связь); дополнительный сигнал — отсутствие улучшения результатов профессии за десятилетия при большом опыте указывает либо на невалидную среду, либо на структурный стимул искажать оценку (Flyvbjerg 2002). (г) Организация. Организации стоит формализовать вопрос «валидна ли эта среда» как этап перед решением, доверять ли суждению эксперта — как установку для класса решений (инвестиции, найм, прогноз), а не разовую проверку одного человека.
2026-09-12
отвечено 0 из 2
1. По Kahneman & Klein (2009, с. 520), какие два условия необходимы для того, чтобы интуитивное суждение было по-настоящему экспертным (skilled)?
2. Что показывает результат Buehler, Griffin & Ross (1994, с. 380) о пользе собственного прошлого опыта для точности прогноза сроков?