То, что конкретные, чувственные данные имеют и должны иметь определенный приоритет при взвешивании доказательств, хорошо известно. Когда абстрактная теория или сообщение из вторых рук противоречат личному наблюдению, в большинстве случаев предпочтение отдается последнему. Существует ряд популярных пословиц, которые советуют с недоверием относиться к данным, полученным из вторых рук: "Не верьте всему, что читаете", "С помощью статистики можно доказать что угодно", "Видеть - значит верить", "Я из Миссури. . ."

Любопытно, что нет аналогичных сентенций, предостерегающих от заблуждений, вызванных нашими собственными наблюдениями. Видеть не всегда означает верить.

Личные наблюдения аналитиков и агентов разведки могут быть столь же обманчивы, как и рассказы из вторых рук. Большинство людей, посещающих иностранные государства, знакомятся лишь с небольшой выборкой людей, представляющих узкий сегмент всего общества. Неполное и искаженное восприятие - обычный результат.

Знакомая форма этой ошибки - единичный, яркий случай, который перевешивает гораздо больший массив статистических данных или выводов, сделанных на основе абстрактных рассуждений. Когда потенциальный покупатель автомобиля подслушивает рассказ незнакомца о том, как его Volvo оказался "лимоном", это может оказать такое же влияние на его мышление, как и статистика в Consumer Reports о среднегодовой стоимости ремонта автомобилей иностранного производства. Если личное свидетельство исходит от брата или близкого друга потенциального покупателя, ему, вероятно, будет придано еще большее значение. Однако логичный статус этой новой информации - увеличить на единицу выборку, на которой основывалась статистика Consumer Reports; личный опыт одного-единственного владельца Volvo не имеет особой доказательной силы.

Нет необходимости говорить о том, что пример "человек-кто" редко заслуживает того доказательного веса, на который рассчитывал человек, приводящий этот пример, или того веса, который часто придает ему получатель.

Самое серьезное последствие использования наглядности в качестве критерия, определяющего влияние доказательств, заключается в том, что некоторые виды очень ценных доказательств не будут иметь большого влияния просто потому, что они абстрактны. Статистические данные, в частности, лишены богатых и конкретных деталей, чтобы вызвать яркие образы, и их часто упускают из виду, игнорируют или сводят к минимуму.

Например, доклад генерального хирурга, связавший курение сигарет с раком, должен был, по логике вещей, привести к снижению потребления сигарет на душу населения. Такого снижения не происходило в течение более 20 лет. Особенно показательна реакция врачей. Все врачи были осведомлены о статистических данных и в большей степени, чем обычное население, знакомы с проблемами здоровья, вызванными курением. То, как они реагировали на эти данные, зависело от их медицинской специализации. Через двадцать лет после выхода доклада Генерального хирурга рентгенологи, ежедневно изучающие рентгеновские снимки легких, имели самый низкий уровень курения. Врачи, которые диагностировали и лечили жертв рака легких, также вряд ли курили. Многие другие категории врачей продолжали курить. Вероятность того, что врач продолжит курить, напрямую зависела от удаленности его специальности от легких. Другими словами, даже врачи, обладающие достаточной квалификацией для того, чтобы понять и оценить статистические данные, были больше подвержены влиянию своего яркого личного опыта, чем достоверных статистических данных95.

Личные анекдоты, реальные истории о том, как люди реагируют или не реагируют на источники информации, и контролируемые эксперименты - все это можно приводить до бесконечности, "чтобы проиллюстрировать тезис о том, что резюме данных, несмотря на их логически убедительные последствия, оказывают меньшее влияние, чем более слабые, но более яркие доказательства". Представляется вероятным, что аналитики разведки также придают недостаточное значение статистической информации.

Аналитики должны придавать мало значения анекдотам и личным историям, если только не известно, что они типичны, и, возможно, вообще не придавать им значения, если можно получить совокупные данные, основанные на более достоверной выборке.

Отсутствие доказательств

Главная особенность разведывательного анализа заключается в том, что ключевой информации часто не хватает. Аналитические проблемы выбираются на основе их важности и предполагаемых потребностей потребителей, без особого внимания к наличию информации. Аналитикам приходится делать все возможное с тем, что у них есть, так или иначе принимая во внимание тот факт, что многие важные сведения, как известно, отсутствуют.

В идеале аналитики разведки должны уметь распознавать, каких именно доказательств не хватает, и учитывать это в своих расчетах. Они также должны уметь оценивать потенциальное влияние недостающих данных и соответствующим образом корректировать уверенность в своих суждениях. К сожалению, этот идеал, похоже, не является нормой. Эксперименты показывают, что "с глаз долой, из сердца вон" - лучшее описание влияния пробелов в доказательствах.

Эта проблема была продемонстрирована с помощью деревьев отказов, которые представляют собой схематические рисунки, показывающие все, что может пойти не так в любом начинании. Деревья отказов часто используются для изучения неисправностей сложных систем, таких как ядерный реактор или космическая капсула.

Нескольким группам опытных механиков было продемонстрировано дерево неисправностей, показывающее все причины, по которым автомобиль может не завестись.97 В дереве было семь основных ветвей - недостаточный заряд аккумулятора, неисправная система запуска, неисправная система зажигания, неисправная топливная система, другие проблемы с двигателем, злонамеренные действия или вандализм и все остальные проблемы, а также несколько подкатегорий под каждой ветвью. Одной группе показали все дерево и попросили представить 100 случаев, когда автомобиль не заводится. Затем членов этой группы попросили оценить, сколько из 100 случаев были

отнесены к каждой из семи основных ветвей дерева. Второй группе механиков показали только неполную версию дерева: три основные ветви были опущены, чтобы проверить, насколько чувствительны испытуемые к тому, что было опущено.

Если бы суждения механиков были полностью чувствительны к отсутствующей информации, то количество случаев отказа, которые обычно приписываются опущенным ветвям, должно было бы быть добавлено к категории "Другие проблемы". Однако на практике категория "Другие проблемы" была увеличена лишь наполовину. Это говорит о том, что механики, которым показывали неполное дерево, не могли полностью осознать и учесть в своих суждениях тот факт, что некоторые причины, по которым автомобиль не заводится, отсутствуют. Когда тот же эксперимент проводился с немеханиками, эффект от отсутствия ветвей был гораздо сильнее.

По сравнению с большинством вопросов интеллектуального анализа, эксперимент "Машина не заводится" включал в себя довольно простые аналитические суждения, основанные на информации, которая была представлена в хорошо организованной манере. То, что представление соответствующих переменных в сокращенном дереве неисправностей было неполным, могли и должны были осознать механики, выбранные в качестве испытуемых. Аналитики разведки часто сталкиваются с подобными проблемами. Отсутствие данных - нормальное явление в проблемах разведки, но признать, что важная информация отсутствует, и учесть этот