Вскоре, однако, стало ясно, что общее соотношение сил складывалось явно не в пользу Шеффера. Излагая последующие события на острове Кауаи, служащие компании доносили, что граждане Соединенных Штатов ложно объявили, что «американцы с русскими имеют войну, угрожая притом, что если король Томари не сгонит вскорости с Атувая русских и не снимет российского флага, то придут к оному 5 американских судов и убьют как его, так и индейцев. Тогда те самые американцы, кои находились в русской службе, взбунтовались против русских. Когда же вспыхнула на острове революция, то американец Виллиам Воздвит (William Wadsworth?), бывший капитаном на нашем бриге „Ильмень“, убежал к индейцам на берег. Индейцы, соединясь с американцами, всех русских отправили с берега на наши суда… Противиться врагам нашим нам никак не было возможно; силы наши были слабы, а американцы и англичане, бывшие в нашей службе, все нам изменили, кроме Жорч Юнга (George Young), бывшего начальником судна „Мирт-Кадьяк“, оставшегося на нашей стороне. Но как судно сие находилось в весьма худом… положении и на нем нельзя было отважиться пуститься в столь дальний путь, каков путь от Сандвичевых островов до Ситхи; почему и положили мы общим согласием переместить Жорч Юнга на бриг „Ильмень“ и отправить оный с нужными бумагами к Ситхе, а на „Мирт-Кадьяке“ пустились к острову Вагу, дабы там можно было сколько-нибудь оный поправить и потом следовать к Ситхе». Судя по журналу Шеффера, это произошло 17(29) июня 1817 г.
С огромным трудом полузатонувший «Кадьяк» добрался до Гонолулу. Выпалив из пушки и подняв белый флаг, Шеффер запросил разрешения срочно войти в гавань. Только через девять дней, 1(13) июля 1817 г., терпящий бедствие «Кадьяк» был наконец допущен во внутреннюю гавань. «Американские капитаны, — с горечью писали Т. Тараканов и его товарищи по несчастью, — … считают за ничто, если русское судно потонет и люди в оном погибнут, лишь бы только удалось им получить лишнее полено сандального дерева». Хотя и с опозданием, Г. А. Шеффер наконец понял, «что рецепт — уступить и убраться домой — гораздо спасительнее и здоровее, нежели ратоборствовать и возложить на меч руку, привыкшую к ланцету».
Трудно сказать, как сложилась бы судьба незадачливого завоевателя «края вечной весны», если бы в Гонолулу не зашел американский корабль «Пантер» под командованием капитана Льюиса, который из чувства признательности Шефферу за оказанную год назад медицинскую помощь согласился «отвезти его по спопутности в Кантон». Оставив на острове Оаху большую группу русских и алеутов во главе с Таракановым, Шеффер 7(19) июля 1817 г. навсегда покинул Гавайские острова. Его сопровождали всего два человека — алеут Г. Изкаков и служитель компании Ф. Осипов. Так закончилась гавайская часть авантюры доктора медицины. Впереди предстояли новые баталии, но место их действия — канцелярии чиновничьего С.-Петербурга, куда в августе 1817 г. стали поступать первые известия об удивительных происшествиях на далеких Тихоокеанских островах.
Сообщения о событиях на Гавайях появились летом 1817 г. и в иностранных газетах, которые сопроводили их различными спекуляциями по поводу активности России на Тихом океане и в Калифорнии. Так, лондонская «Морнинг кроникл» в номере от 30 июля 1817 г., ссылаясь на немецкую газету, сообщала о переговорах России по поводу уступки Калифорнии с целью приобретения монополии в тихоокеанской торговле. Здесь же приводилось сообщение американской газеты «Нэшнл адвокейт» о присоединении русскими одного из островов («недалеко от Сандвичевых островов») и постройке на нем укреплений. «Мы скоро обнаружим эту нацию с ее славным (renown) и активным правительством во всех частях света». Этот же отрывок, помещенный в газете «Курир», стал предметом внимания и в русском Министерстве иностранных дел. 22 сентября (4 октября) 1817 г. краткое сообщение о присоединении одного из островов в Тихом океане с ссылкой на американские газеты было помещено в «Северной почте». Подробную записку о Сандвичевых островах с приложением письма от правителя селения Росс И. А. Кускова от 12(24) августа 1816 г., в котором описывались успехи Г. А. Шеффера и сообщалось о вступлении Каумуалии в русское подданство, составил известный морской историк и географ В. Н. Берх.