Подготовка подробного списка показателей группой знающих аналитиков обычно является хорошим опытом обучения для всех участников. Она может стать полезной средой для обмена знаниями между аналитиками из разных организаций или обладающими различными видами экспертизы - например, аналитиками, специализирующимися на конкретной стране, и теми, кто разбирается в определенной области, такой как военная мобилизация, политическая нестабильность или экономическое развитие.
Когда аналитики или лица, принимающие решения, резко расходятся во мнениях относительно (1) интерпретации событий (например, политической динамики в Иране или хода конфликта в Сирии), (2) виновности или невиновности "интересующего лица" или (3) виновности подозреваемого в контрразведке, индикаторы могут помочь обезличить дискуссию, переключив внимание с личных точек зрения на более объективные критерии. Эмоции часто можно ослабить, а разногласия по существу прояснить, если все стороны заранее согласятся с набором критериев, которые продемонстрируют, что события развиваются или не развиваются в определенном направлении или что поведение человека свидетельствует о том, что он или она виновны в том, что их подозревают, или действительно являются шпионами.
Индикаторы помогают противостоять предубеждению заднего ума, поскольку они представляют собой письменный отчет, более точно отражающий то, о чем аналитик думал в тот момент, а не полагающийся на память человека. Процесс разработки индикаторов также заставляет аналитика задуматься и изучить все, что может потребоваться для того, чтобы произошло конкретное событие. Этот процесс также может обеспечить большую объективность, если разработать два набора индикаторов, один из которых указывает на то, возникнет ли сценарий, а другой - на то, что он не возникнет.
Метод
Первый шаг в использовании этой техники - создание списка индикаторов. Составление списка индикаторов может варьироваться от простого процесса до сложной командной работы. Например, при минимальных усилиях вы можете составить список того, что вы ожидаете увидеть, если определенная ситуация будет развиваться так, как вы опасаетесь или предвидите. Или вы можете вместе с другими определить несколько переменных, которые могут повлиять на ситуацию, а затем проранжировать значение каждой переменной на основе поступающей информации о соответствующих событиях, действиях или официальных заявлениях. В обоих случаях для определения показателей часто используется мозговой штурм, выдвижение гипотез или разработка сценариев.
Пересмотрите и уточните список, отбросив дублирующие показатели и объединив схожие. (См. Рисунок 6.2b для примера списка индикаторов).
Изучите каждый показатель, чтобы определить, соответствует ли он следующим пяти критериям. Отбросьте те, которые окажутся несоответствующими. Следующие критерии расположены по принципу континуума - от необходимых до крайне желательных:
- Наблюдаемые и собираемые: Необходимо обоснованно ожидать, что при наличии показателя его можно будет наблюдать и сообщать о нем из надежного источника. Если показатель должен отслеживать изменения с течением времени, он должен быть собираемым с течением времени.
- Валидный: Показатель должен иметь четкое отношение к конечному состоянию, которое аналитик пытается предсказать или оценить, и должен быть несовместим со всеми или хотя бы некоторыми альтернативными объяснениями или результатами. Он должен точно измерять рассматриваемое понятие или явление.
- Надежность: Сбор данных должен быть последовательным при использовании сопоставимых методов. Те, кто наблюдает и собирает данные, должны наблюдать одно и то же. Надежность требует точного определения показателей.
- Стабильность: Показатель должен быть полезен с течением времени, чтобы можно было проводить сравнения и отслеживать события. В идеале показатель должен быть заметен на ранних этапах развития, чтобы у аналитиков и лиц, принимающих решения, было время отреагировать соответствующим образом.
- Уникальность: Индикатор должен измерять только одну вещь и в сочетании с другими индикаторами указывать только на изучаемое явление. Ценные показатели - это те, которые не только соответствуют определенному сценарию или гипотезе, но и не противоречат альтернативным сценариям или гипотезам. Для проверки диагностичности показателей можно использовать инструмент Indicators Validator™, описанный далее в этой главе.
Регулярно следите за списками показателей, чтобы отслеживать тенденции и выявлять признаки изменений.
Рисунок 6.2b Использование индикаторов для отслеживания возникающих сценариев в Замбрии
Источник: 2009 Pherson Associates, LLC.