J. Скотт Армстронг, известный специалист по методологии прогнозирования, изучил литературу о валидности ролевых игр как метода предсказания решений. Он обнаружил, что эмпирические данные подтверждают гипотезу о том, что ролевые игры обеспечивают большую точность прогнозирования исхода конфликтов по сравнению с индивидуальным экспертным мнением. В пяти различных исследованиях ролевая игра предсказала правильный исход в 56 процентах случаев из 143 прогнозов, в то время как экспертное мнение оказалось верным в 16 процентах случаев из 172 прогнозов. (См. "Происхождение этой техники"). Исход конфликтных ситуаций трудно предсказать, потому что они включают в себя серию действий и реакций, причем каждое действие зависит от предыдущей реакции другой стороны на предыдущее действие и так далее. Люди не обладают когнитивными способностями, чтобы проигрывать в голове столь сложные ситуации. Разыгрывание ситуаций и реакций полезно, потому что оно имитирует этот тип последовательного взаимодействия.
Результаты Армстронга подтверждают использование ролевых игр в качестве полезного инструмента для анализа разведданных, но они не подтверждают, что результат можно рассматривать как достоверное предсказание. Несмотря на то что Армстронг признал результаты ролевой игры более точными, чем мнение эксперта, коэффициент ошибок для ролевой игры все равно был достаточно велик. Более того, условия, в которых Ролевая игра используется для анализа разведданных, сильно отличаются от тех исследований, которые рассматривал и проводил Армстронг. Когда техника используется для анализа разведданных, целью является не четкое предсказание, а лучшее понимание ситуации и возможных исходов. Метод не заканчивается с завершением ролевой игры. Обязательно проводится анализ ключевых поворотных моментов и того, как мог бы измениться исход, если бы в ключевые моменты игры были приняты другие решения.
Ролевая игра - это базовая техника во многих различных областях аналитики. Описание ее здесь основано на личном опыте Ричардса Хойера и Рэнди Ферсона, а также на информации из следующих источников: Robert Mandel, "Political Gaming and Foreign Policy Making During Crises," World Politics 29, no. 4 (июль 1977 г.); и Дж. Скотт Армстронг, "Ролевые игры: Метод прогнозирования решений" в Principles of Forecasting: Руководство для исследователей и практиков", под ред. Дж. Скотт Армстронг (Нью-Йорк: Springer Science+Business Media, 2001).
Интеллектуальные аналитики часто пытаются спрогнозировать действия противника или конкурента. При этом им необходимо избегать распространенной ошибки зеркального отражения - естественной склонности считать, что другие думают и воспринимают мир так же, как и мы. Анализ Red Hat5 - это полезная техника, позволяющая попытаться воспринять угрозы и возможности так, как их видят другие, но сама по себе эта техника имеет ограниченную ценность без глубокого понимания культуры другой страны и народа.
-Ричардс Дж. Хойер-младший, Психология разведывательного анализа (1999)
Шансы на точность анализа Red Hat выше, если пытаться предугадать поведение конкретного человека, имеющего право принимать решения. Авторитарные лидеры, а также небольшие сплоченные группы, такие как террористические ячейки, являются очевидными кандидатами для такого рода анализа. Шансы сделать точный прогноз относительно решения противника или конкурента значительно ниже, если это решение сдерживается законодательной властью или находится под влиянием конфликтующих групп интересов. В правоохранительных органах Red Hat Analysis может эффективно использоваться для моделирования вероятного поведения преступника или наркобарона.