9 мая 1824 года А. А. Фролов-Багреев был назначен на место члена совета Министерства финансов и управляющего Государственным заемным банком. Поселился Александр Алексеевич вместе со своей семьей в одном доме с Михайлой Михайловичем — на Невском проспекте. Вместе с ними проживал еще Г. С. Батеньков. Жалованья петербургского чиновника Фролова-Багреева, составлявшего 11 тысяч рублей в год, было недостаточно для содержания его семьи. Сперанскому приходилось добавлять к нему по 25 тысяч рублей. При этом Михайло Михайлович и семья его дочери вели одно хозяйство, имели общих слуг, общие кареты с кучерами.
7 мая 1825 года Сперанский лишился самого близкого своего друга — в этот день умер тайный советник и сенатор Аркадий Алексеевич Столыпин. Похороны его состоялись на Лазаревском кладбище Александро-Невской лавры. В газете «Северная пчела» появилось в качестве отклика на эту смерть стихотворение, обращенное к вдове Столыпина и дочери адмирала Н. С. Мордвинова Вере Николаевне[11]:
Автором стихотворения был Кондратий Рылеев. Менее года спустя раскроется тайная подоплека этого его произведения, в котором имя Аркадия Алексеевича Столыпина ставилось в один ряд с именем Николая Семеновича Мордвинова. Рылеев проявит себя как руководитель мятежа молодых дворян, поставивших своею целью смену в России правления и правительства. После подавления мятежа на допросах его участников обнаружится, что в состав нового правительства мятежники предполагали включить и Н. С. Мордвинова, и А. А. Столыпина[12]. Так, Н. А. Бестужев заявит на следствии: «Покойный сенатор А. А. Столыпин одобрял тайное общество и потому верно бы действовал в нынешних обстоятельствах вместе с нами».
С конца ноября 1821 года встречи и беседы Сперанского с императором Александром стали более редкими. Михайло Михайлович увидел в этом плохой знак для себя. 10 декабря он записал в свой дневник: «Вечер в Смольном монастыре. Праздник. Г[осударь] Щмператор] избегал всякого со мной разговора. Работы с 25 ноября не было. Первый знак охлаждения».
Сперанский хорошо понимал, насколько непрочно его положение при царском дворе.
Святоши запишут меня в безбожники; противники их будут о мне сожалеть и причислять к своей стаде, а я, равно гнушаясь теми и другими, принадлежу и желаю принадлежать единственно и исключительно Вам. В Вас, Всемилостивейший Государь, в Вашем образе мыслей, равно от той и другой крайности удаленном, могу я искать и надеюсь всегда найти твердую защиту против всех хитросплетенных тонкостей врагов моих, врагов, ни десятилетним молчанием, ни кротостию всего моего поведения, ни уступчивостью моею, можно сказать, безмерною, ничем не у молимых.
20 января 1822 года Сперанский работал вечером в государевом кабинете, когда пришел Аракчеев и сообщил, что его величество подписал указы по Сибири.
Император Александр принял почти все предложения Сперанского по реорганизации управления Сибирью, на что Михайло Михайлович не особо поначалу надеялся. 26 января 1822 года вышел высочайший Указ о разделении Сибири на Восточную и Западную; 22 марта были назначены в каждую из этих частей генерал-губернаторами выбранные Сперанским лица. Все это как будто свидетельствовало, что Михайло Михайлович опять становился влиятельным сановником.