Люба была не единственной арестованной родственницей члена Политбюро. Жена Молотова, жена Калинина, брат Кагановича — никого из них не смогли защитить могущественные родственники. Нельзя винить Хрущева за то, что он не вытащил Любу из тюрьмы. Но почему затаил на нее обиду? Возможно, дело было не в надуманных обвинениях, а в неприемлемом для него поведении невестки. Жизнерадостная, бесстрашная, умевшая наслаждаться жизнью во всех ее проявлениях, Люба была очень похожа на своего мужа; и Толя, которому в 1943 году исполнилось девять, хотя и не был Лениным сыном, удивительно походил на него по характеру.
«Я был из тех, кто ни на чем не способен сосредоточиться, — рассказывает Толя. — Вечно был в движении, вечно куда-то рвался и чего-то хотел. Когда приехал Леня, он привез с собой чудесный пилотский шлем: я тут же завладел этим шлемом и катался в нем с горки. А однажды прицепился к машине и проехался за ней по обледеневшей дороге. Леня не возражал, но мама очень сердилась. У Лени был ящик с огнестрельным оружием и патронами. Его держали запертым, но однажды, когда мама с Леней были в театре, я сумел его открыть, достал пистолет и отправился играть с приятелем — сыном хрущевского шофера, который жил в подвале нашего дома. Я принес с собой обойму, и он уговорил меня пострелять. Первой же пулей я разбил окно, и вся комната наполнилась дымом. Мы так испугались, что спрятались под одеяло — на случай, если кто-нибудь войдет. На следующий день, когда Леня стал меня расспрашивать, я сначала говорил, что ничего не знаю, но скоро во всем признался. Леня поставил меня в угол, но потом простил. А в другой раз я выкинул из окна бутылку и чуть не попал в Вышинского, который как раз проходил через двор».
Прямое попадание в голову знаменитому сталинскому обвинителю, возможно, принесло бы Анатолию славу — но попытка придушить собаку шелковым шарфом, который подарила ему Ирина Сергеевна, славы определенно не принесла. Особенно когда пес вырвался и убежал с дорогим подарком в зубах. В первом классе Толя был выше всех, но очень неуклюж; товарищи постоянно его дразнили, и Люба забрала его из школы и наняла гувернантку — пожилую даму, в характере которой дореволюционная интеллигентность сочеталась со сверхъестественной строгостью. Мать Никиты Хрущева обожала Толю 44, а Маленковы на него жаловались. Нина Кухарчук вспоминает, как Толя мочился в раковину и Нина Петровна кричала: «Он развратит моих девочек!» Как только Люба с детьми переехала в отдельную квартиру, встречи Толи с остальными Хрущевыми почти прекратились. «Я как будто выпал из семьи», — вспоминал он.
Когда мать арестовали, Толе сказали только, что она «уехала». В то же утро один из работников института отвез его в Ставрополь и поместил в детский дом. Детские дома сталинской эпохи были ужасны и в мирное время, в войну же превратились в настоящий ад. О Любе, о сестре, о прочих куйбышевских родственниках Толе ничего не говорили. «Все они меня бросили», — думал мальчик. Месяц спустя он убежал из приюта, доплыл на пароходе до Куйбышева и — грязный, обовшивевший, покрытый сыпью — объявился на пороге Ирины Сергеевны. Бывшая гувернантка лечила его, добывая лекарства из специальной кремлевской клиники. Однако скоро Нина Петровна, сказав лишь, что мать Толи уехала в Москву по делам, снова сдала его в детдом.
С собой Нина Петровна дала Толе колбасы. Питание в детдоме было столь мизерным (300 граммов хлеба в день), что дети подогревали на печи и пытались есть костяные пуговицы. Директор детского дома некоторое время позволял Толе есть колбасу тайком, но его собственные дети смотрели на Толю такими голодными глазами, что в конце концов он не выдержал и отдал остаток им.
Дети Толиного возраста посещали школу — это дало Толе возможность снова сбежать. Он воровал пирожки на вокзале, просил милостыню на рынке. В феврале 1944 года Толя снова вернулся в Куйбышев — и узнал, что Хрущевы уже в Москве. Чтобы раздобыть денег на билет, Толя украл набор столовой посуды и попытался его продать, но был пойман и снова водворен в детский дом. Еще несколько неудачных побегов — и детдом от него избавился, отправив в Ленинград, в военно-морское училище.