Грабин был ближе к высшему советскому руководству, чем любой другой конструктор. Он многие годы имел прямой доступ к Сталину. Василий Гаврилович мог себе позволить даже ссориться со Сталиным, что не мешало его друзьям и недругам считать Грабина любимцем Иосифа Виссарионовича. В беседе со мной Сергей Андреевич Худяков (сын А.П. Худякова) утверждал, что из подчиненных Грабина в 1941—1953 гг. никто не был репрессирован.
В середине 40-х гг. для Грабина рядом с железнодорожной станцией Подлипки Дачные был построен двухэтажный дом на участке площадью 5 гектаров. Там находилась конюшня — Василий Гаврилович любил заниматься конным спортом.
Но пожить в этом доме Грабину пришлось недолго. У знаменитого конструктора начался «служебный роман» с секретаршей, которая была его моложе на 25 лет. Говорят, все началось с любви Анны Павловны к шоколадным конфетам. Так это или не так, но у Василия Гавриловича и Анны Павловны в 1949 г. родился первый сын Павел, а в 1953-м — второй Гавриил.
С разводом с Валентиной Васильевной у Василия Гавриловича были какие-то трудности, и свой брак с Анной Павловной ему удалось оформить лишь 10 февраля 1957 г. Однако задолго до этого Грабин построил для Анны Павловны большой деревянный дом в Валентиновке на улице Нахимова, куда вскоре переселился и сам.
После ликвидации ЦНИИ-58 Грабин не пожелал стать пенсионером. Приказом министра обороны от 4 июля 1959 г.
№ 01144 его назначили военным консультантом группы генеральных инспекторов Министерства обороны СССР. Эта группа была синекурой, специально созданной Хрущевым для престарелых маршалов и генералов. Делать там Василию Гавриловичу было просто нечего, и приказом министра обороны № 01540 от 30 сентября 1960 г. Грабин был уволен из кадров Советской Армии в отставку по ст. 60 пн. «б» (по болезни) «с правом ношения военной формы одежды».
Сразу после ухода из ЦНИИ-58 Василий Гаврилович попытался устроиться на работу «на гражданке». Но, увы, никто не захотел брать к себе прославленного конструктора, технолога и организатора производства. Грабину отказали даже в Госплане, куда его часто приглашали для консультаций. Все это объяснялось, видимо, спущенным сверху соответствующим негласным указанием.
Несколько месяцев провел Василий Гаврилович в поисках работы, пока ректор МВТУ им. Баумана М.В. Онучин не пригласил его на должность профессора кафедры спецтехнологии.
В.Г. Грабин жил довольно скромно для своего положения. В отличие от других знаменитостей он не имел московской квартиры. Это только наши куплетисты пели: «Все прописаны в столице, один Шолохов — в станице». На самом деле М.А. Шолохов имел роскошные апартаменты в Москве, а вот Грабин — нет.
Первый служебный автомобиль Сталин подарил Василию Гавриловичу еще в 30-е гг. Собственного автомобиля у него не было, лишь потом его сын Павел купил «Жигули». Василий Гаврилович же, пока позволяло здоровье, ездил электричкой и городским общественным транспортом из Калининграда в МВТУ и обратно.
Шли годы, но Василий Гаврилович по-прежнему остро переживал разгром ЦНИИ-58 и собственную отставку. В письме от 30 августа 1969 г. он сообщил А.П. Худякову:
«В понедельник 1 сентября начинаю в очередной раз трудовую жизнь в МВТУ. Откровенно должен сказать, не испытываю от этого никакого удовольствия. Душа моя иная и ненасытная, любящая размах и громадные объемы, а их нет... Приходится сожалеть, что так жестоко поступили сильные мира сего.
А сколько можно бы еще сделать, а сколько уже потеряно, — трудно оценить. К сожалению, нет глубины в понимании многого, и в частности того, что нами уже сделано не так давно. Уже и мы — творцы — начинаем забывать...».
18 апреля 1980 г. Василий Гаврилович Грабин скончался. А.П. Худяков писал: «Грабин умер мгновенно. Закончив писать поздравления [друзьям к 1 мая. —
Гражданская панихида состоялась в Краснознаменном зале Дома Советской Армии. Похоронили Василия Гавриловича на Новодевичьем кладбище в Москве.
И после смерти конструктора власти остались верны себе. Все средства массовой информации хранили молчание о смерти. Некролог был напечатан лишь после его похорон.
Во время 70-летнего юбилея Василия Гавриловича соратники уговорили его приступить к написанию мемуаров. Весной 1972 г. он закончил фундаментальный труд под названием «Оружие победы». Он состоял из двух объемных томов, насчитывавших более двух тысяч страниц.
Той же весной Грабин послал свою рукопись в журнал «Октябрь». С конца 60-х гг. журнал «Октябрь» считался крайне правым («реакционным»), ему противопоставляли «либеральные» издания типа «Нового мира». Члены редакции «Октября» М.Д. Михалев и В.В. Левашов взялись за литературную обработку грабинских мемуаров.