Не успел Волльвебер по настоящему освоится на новом месте в Копенгагене, как из Москвы поступило распоряжение о его назначении секретарем ИМПР: «Летом 1933 года я по решению секретариата Исполнительного бюро Профинтерна и с согласия ЦК КПГ был назначен секретарем Интернационала моряков и портовых рабочих, – пишет он в автобиографии. – В это время участвовал в разработке тактики забастовочного движения в ряде стран: Франции, Дании, Швеции, США, Австрии, Финляндии, Латвии. Одновременно руководил переправкой нелегальных материалов из Скандинавии в Северную Германию».
Перед Волльвебером ставилась задача создания под прикрытием ИМПР «тайной международной организации борьбы против фашизма и войны, за оборону Советского Союза». Соратники назовут ее «Организация Бернхард» (один из псевдонимов Эрнста). Первыми агентами, привлеченными Волльвебером в ее ряды, стали моряки Кребс, Аватин, Кнюфген. Возникшие при их содействии клубы моряков в Амстердаме, Бремене, Гамбурге, Данциге, Копенгагене, Осло, Риге, Роттердаме, Таллине стали фактически резидентурами «Бернхарда». Раскинутая в них широкая агентурная сеть под его руководством занималась сбором разведывательной информации, проведением диверсионных операций на судах и в портах. Кроме того, эта агентура использовалась в качестве почтовых ящиков, курьеров для связи с Москвой.
«ИМПР вел работу по трем основным направлениям: 1) революционные действия, 2) связь между центром Москва-Берлин и остальным миром, 3) шпионаж, – пишет Кребс. – Помимо стационарных структур союз имел в своем распоряжении пятнадцать „политических инструкторов“, которые постоянно путешествовали из одной страны в другую, каждый из них отвечал за эффективную работу аппарата на закрепленной за ним территории: на Ближнем Востоке, в США и Канаде, в Скандинавии и т. п. Союз имел сорок семь Интерклубов. Его основной печатный орган „Бюллетень ИМПР“, издаваемый на тринадцати языках, печатался в Гамбурге и контрабандно распространялся по всему миру. Из общего месячного бюджета ИМПР примерно 8 тысяч долларов уходило на содержание штаб-квартиры в Гамбурге, а остальные 44 тысячи долларов направлялись в качестве субсидий зарубежным представительствам… В Соединенных Штатах получателями этих коминтерновских субсидий с 1930 по 1933 год были Джордж Минк, а впоследствии Рой Хадсон, по кличке Лошадиная морда. Мне самому приходилось относить эти деньги по адресу 140 Броуд-стрит в Нью-Йорке. Деньги предназначались для поддержки издания газеты „Голос моряка“, для помощи Интерклубам… Позже Джордж Минк стал одним из главных агентов ГПУ, а Рой Хадсон – членом ЦК компартии США».
Не успев провести операцию возмездия гестаповцам в Гамбурге, Волльвебер, по согласованию с Москвой, решил организовать в отместку нацистам массовые забастовки и акты саботажа судов гитлеровской Германии в портах стран Северной Европы. К осуществлению этого плана он привлек портовых рабочих в Антверпене Вайса и Воннебергера, а также Кребса, Аватина, Кнуфгена; возможности представителя Коминтерна Дженсена, датских коммунистов во главе с Йенсеном.
Основным лозунгом этих протестных мероприятий решено было сделать дискредитацию судового флага Германии. Эту идею подсказали Волльвеберу портовые рабочие, с которыми он беседовал, знакомясь с обстановкой в порту. Он вообще охотно погружаться в среду матросского братства. По вечерам его можно было часто увидеть в дружеской компании моряков, докеров в кепках и беретах в каком-нибудь захудалом ресторанчике на берегу моря. В непринужденных разговорах с этим свободолюбивым людом Эрнст получал заряд бодрости, а иногда и полезную информацию.
В портах под контролем коммунистов и агентов Волльвебера создавались забастовочные комитеты и специальные группы боевиков. Они снабжались многочисленными транспарантами, листовками, прокламациями с надписью: «Долой флаг убийц! Отказывайтесь грузить суда под флагом убийцы Гитлера! Свастика – символ голода!». Среди портовых рабочих распространялись бюллетени ИМПР с подборками сообщений прессы, фото о зверствах гестапо в преследовании коммунистов, социал-демократов, профсоюзных активистов, матросов.