Настоящим потрясением для него стал арест его близкого знакомого и почитателя его таланта, русского философа Ивана Ильина. Поначалу Жаров и Ильин разделяли отношение национал-социалистов к коммунистам, но вскоре оба были вынуждены согласиться с Генрихом Манном, заметившим, что, кроме диктатуры пролетариата, есть более страшная тирания — диктатура подонков.
В доносах, направленных в RMK, помимо прочего, сообщалось, что с фотографий рекламных плакатов, посланных в Америку для печати, свастику удалили по указанию Жарова, и сделали это по политическим соображениям. Госпожа Эбнер в ответ на это писала: «Что касается конкретного обвинения господина Жарова в ретушировании флага со свастикой на фотографии, то дело обстояло следующим образом: хор сфотографировался для рекламного материала, готовившегося в Америке. Несколько снимков получились в очень удачных ракурсах. В это время мимо маршировал трудовой отряд СС. Офицер, командовавший отделением, подошел к господину Жарову и спросил, не может ли хор исполнить несколько песен. Конечно же, господин Жаров с удовольствием согласился, и хор исполнил несколько песен. Затем они еще какое-то время поболтали. При проявлении фотографий обнаружилось, что на заднем плане некоторых снимков виден флаг с изображением свастики. И насколько я могу вспомнить, не господин Жаров, а администратор выступил против того, чтобы снимки с таким фоном отправили в Америку, и не по той причине, что флаг со свастикой оскорбителен, а из чисто объективных соображений: они отправят эти фотографии зря, т. к. американский менеджер переправит их сразу обратно. Во-первых, потому, что выяснится — фотографии делали не в Америке, а во-вторых, поскольку Америка не станет заниматься пропагандой в угоду Германии. Я не хочу утаивать и тот факт, а, напротив, хотела бы на него указать, что год назад хор по прибытии в Нью-Йорк сразу же был отправлен миграционными службами на остров Эллис. Мы опасаемся, что хор с большой вероятностью будет и в этот раз отправлен на тот же остров, если мы продолжим открыто, с помощью фотографий, пропагандировать изображение свастики. Не думаю, что доносчики изложили все факты достоверно».
Это было действительно так. Письмо в RMK пришло после того, как новоиспеченный хор проиграл суд первой инстанции. В ходе дальнейшего разбирательства выяснилось, что никаких политических претензий к хору Жарова не было. В основном все проблемы лежали в финансовой плоскости. Разбирательство показало, что Жаров строго-настрого запретил всем участникам хора за границей не только давать интервью, но и вступать в любые политические дискуссии, касающиеся современной Германии и большевистской России. Хотя все отлично знали об отношении Жарова к Советскому Союзу и о его благотворительной помощи Белому движению.
Доносчики назвали еще одну причину своего ухода из хора — намерение руководителя музыкального коллектива получить американское гражданство. С этим семеро бывших певцов оказались категорически не согласны и обвинили Жарова в том, что во время одной из своих поездок тот рано или поздно обязательно останется в Америке. Администратору хора потребовалось долго оправдываться, уверяя RMK, что никто из певцов хора не собирается принимать американское гражданство. Просто администрация во главе с регентом предприняла попытку получить сертификат, разрешающий облегчённый въезд в США. Хору это нужно для того, чтобы после гастролей в США иметь возможность сразу выехать в Латинскую Америку, Южную Африку, Австралию или Индию. В противном случае они должны возвращаться в Европу и уже оттуда следовать дальше.
До сведения RM К госпожа Эбнер также довела информацию о том, что на одном из собраний хора регент однозначно заявил — он только в том случае будет хлопотать о получении американских сертификатов, если каждый член хора заверит его и весь коллектив, что ни при каких обстоятельствах не захочет сделать своим местом жительства Америку. Жаров даже потребовал от всех участников хора письменные расписки в том, что если кто-то покинет хор и поселится в Америке, то обязуется в течение трех лет передавать всю свою зарплату хору.
При этом Сергей Алексеевич подчеркнул, что делает это прежде всего из опасения, что в один прекрасный день 8—10 артистов хора, объединившись, могут остаться в Америке и создать свой собственный коллектив с аутентичным названием, что, несомненно, нанесет как репутационный, так и материальный ущерб хору-оригиналу. Все артисты заверили регента, что таких намерений не имеют. Конечно, среди них были и те семеро, кто в 1935 году решил создать свой хор донских казаков под управлением герцога Лейхтенбергского.