В тяжелые для Аракчеева времена поддержал его и другой немало ему обязанный человек — князь Юсупов. «Известно Вашему Сиятельству, как я вас люблю и почитаю, — писал он в Грузино 19 апреля 1826 года. — Вы меня совсем забыли, будьте уверены в моей к вам преданности, и сколь я желаю, чтобы вы всегда были уверены в оной».
Подобные сладостные для Алексея Андреевича голоса были, однако, редки. Они терялись в общем вопле ненависти, ставшем особенно громким и разнузданным с того момента, как лишился он прежней власти, растворялись в потоке несшихся в адрес бывшего временщика оскорблений. Генерал-адъютант прусского короля Фридриха Вильгельма IV Фон-Герлах, пребывавший в рассматриваемую пору в Петербурге, записывал в свой дневник 14 марта: «В публике недовольны тем, что император не выказывает большего презрения «каналье Аракчееву», для которого жестокость есть отрада, и что его креатура Муравьев еще служит в императорском кабинете».
Император же Николай относился к бывшему временщику подчеркнуто уважительно. Вероятно, государь испытывал нужду в советах опытного администратора, каким был Аракчеев. Иначе как объяснить его приглашение графу, направленное 6 апреля 1826 года из Царского Села. «Я здесь остаюсь до субботы, — сообщал Николай, — квартира прежняя ваша готова и тепла, и прошу пожаловать, так, чтобы после обеда можно было заняться».
Новый государь ценил деловые качества графа, усердие, с каким тот служил, приверженность его к порядку. А. X. Бенкендорф, назначенный Николаем начальником созданного им Третьего отделения собственной Его Императорского Величества канцелярии, просил к себе в адъютанты А. Ф. Львова. «Возьми его, — ответил император, — отличный офицер: восемь лет выслужил у графа Аракчеева».
Некоторые современники, увидевшие немало сходства в воззрениях на государственную службу императора Николая и Аракчеева, высказывали тогда предположение, что бывший временщик еще возвысится до прежнего могущества. Снятый в 1820 году Сперанским с помощью Аракчеева с должности иркутского губернатора Н. И. Трескин писал 5 апреля 1826 года из Петербурга в Москву своему брату: «Нынешнего государя окружающие его еще не проникли и не могут ручаться за свою прочность. Кажется, он не позволит никому располагать собою; слышно, он осторожен и сериозен… По-видимому, государь кажется ко всему внимателен и шутить не любит. Несмотря, что граф Аракчеев теперь, кажется, ничего более не значит, как начальник военных поселений, но, впрочем, легко станется, что он со временем, по хитрости, точности по службе и сходству характера войдет в бывший кредит. Скоро и сему может быть развязка».
Развязка наступила в том же месяце, но совсем не такая, какую предполагал Трескин. Лишившись всего того, к чему он более трех десятилетий в своей жизни был привязан: своей Настасьи, императора Александра — «отца и благодетеля», по собственному его выражению, Аракчеев сделался равнодушным к должностям и власти. Он, конечно, сознавал, что наступили новые времена и при новом императоре не быть ему в прежней силе — никто не хочет видеть его прежним: ни государь Николай, ни общество. Но главное, и сам граф не мог уже быть
В марте 1826 года Аракчеев стал готовиться к поездке за границу для лечения на курортах. Испытывая нехватку денег, он принял решение продать в Кабинет Его Величества некогда подаренные ему драгоценные вещи: золотую черепаховую табакерку с портретом тогдашнего шведского короля — портрет сей, осыпанный тридцатью крупными бриллиантовыми камнями, был подарен Аракчееву самим королем в бытность его наследником в 1812 году и принят был им по приказанию покойного российского государя; бриллиантовый перстень с вензелем блаженной памяти императора Павла I, осыпанный двенадцатью крупными бриллиантами, — он был пожалован графу, как сам его сиятельство признавал, «за первое произведенное батальонное ученье Сводного Гренадерского Преображенского полка батальону в 1797 году»; и наконец, серебряную посуду, десертное вызолоченное серебро, фарфоровые десертные тарелки и т. п. За все эти вещи Аракчеев получил 38 тысяч 890 рублей.