Аналитики должны знать о пяти обстоятельствах, которые могут привести к расхождению между собственными убеждениями аналитика и показателями несоответствия. В первых двух обстоятельствах, описанных в следующем списке, баллы несоответствия кажутся неверными, когда на самом деле они верны. В следующих трех обстоятельствах баллы несоответствия могут казаться верными, когда на самом деле они неверны. Аналитикам необходимо распознать эти обстоятельства, понять суть проблемы и внести соответствующие коррективы.
Пропущенные предположения или логические умозаключения: Если оценки в матрице не подтверждают наиболее вероятную, по вашему мнению, гипотезу, матрица может быть неполной. На ваше мышление могут повлиять предположения или логические выводы, которые не были включены в список релевантной информации или аргументов. Если это так, их следует включить, чтобы матрица полностью отражала все, что влияет на ваше суждение по данному вопросу. Всем аналитикам важно признать роль, которую играют в их анализе невысказанные или не подвергнутые сомнению (а иногда и непризнанные) предположения. Например, в политическом или военном анализе выводы могут быть обусловлены предположениями о возможностях или намерениях другой страны. Главная цель процесса ACH - выявить факторы, которые определяют мышление аналитика по тому или иному вопросу, чтобы затем подвергнуть их сомнению и, если необходимо, изменить.
Недостаточное внимание к менее вероятным гипотезам: Если вы считаете, что при подсчете баллов одна или несколько менее вероятных гипотез вызывают излишнее доверие, это может быть связано с тем, что вы не собрали необходимую информацию для их опровержения. Возможно, вы уделили недостаточно внимания получению такой информации, или же ее просто нет. Если вы не можете найти доказательства для опровержения гипотезы, возможно, необходимо скорректировать свое мышление и признать, что неопределенность больше, чем вы думали изначально.
Определенная актуальная информация: Бывают случаи, когда сборщики разведданных получают информацию от надежного и хорошо расположенного внутреннего источника. Анализ ACH может обозначить эту информацию как имеющую высокую степень достоверности, но этого, вероятно, недостаточно, чтобы отразить убедительность такой релевантной информации и то влияние, которое она должна оказывать на размышления аналитика о гипотезах. Другими словами, в некоторых обстоятельствах один или два высокоавторитетных отчета от надежного источника, обладающего информацией, могут настолько сильно поддержать одну гипотезу, что опровергнут все остальные гипотезы, независимо от того, что может показать другая менее надежная или менее определенная релевантная информация.
Несбалансированный набор доказательств: Доказательства и аргументы должны быть репрезентативными для проблемы в целом. Если имеется большое количество доказательств по смежным, но периферийным вопросам и сравнительно мало доказательств по основному вопросу, оценка за несоответствие может ввести в заблуждение.
Уменьшение отдачи: По мере накопления доказательств каждый новый пункт несоответствующей информации или аргументации оказывает меньшее влияние на баллы несоответствия, чем предыдущая информация. Например, влияние любого отдельного элемента меньше, когда их пятьдесят, чем когда их всего десять. Чтобы понять это, подумайте, что происходит, когда вы вычисляете среднее значение пятидесяти чисел. Каждое число имеет одинаковый вес, но добавление пятьдесят первого числа окажет меньшее влияние на среднее значение, чем если бы вы начали с десяти чисел и добавили еще одно. Иначе говоря, накопление релевантной информации со временем замедляет скорость изменения балла несоответствия в ответ на появление новой релевантной информации. Поэтому эти числа могут не отражать реальный объем изменений в ситуации, которую вы анализируете. Если вы оцениваете изменения с течением времени, желательно периодически удалять старую релевантную информацию или разделить релевантную информацию и анализировать старую и новую релевантную информацию отдельно.
При использовании ACH следует обратить внимание на некоторые другие предостережения:
Существует вероятность того, что ни одна из выявленных релевантных сведений не является диагностической.
Не вся необходимая информация указана.
Выявленная информация может быть неточной, обманчивой или вводящей в заблуждение.
Рейтинги субъективны и поэтому подвержены человеческому фактору.
Когда анализ проводится группой, результат может зависеть от здоровой групповой динамики.
Взаимосвязь с другими техниками