Антонина Владимировна умерла 5 марта в возрасте 81 года. На пенсию она ушла только в 72 года, работая в предвоенные и военные годы в таких окраинных районах Москвы, как Черкизово и Дорогомилово. На ее похороны Фадеев приехать не сумел — он тогда в очередной раз лежал в больнице (по другой версии он не приехал потому, что не мог видеть мать мертвой), из близких усопшей там была лишь ее дочь, сестра Фадеева, Татьяна.
Во-вторых, тот год показал, что новая власть относится к Фадееву с недоверием. Уже год, как не было в живых Сталина, который худо-бедно, но благоволил к Фадееву (даже с сочувствием относился к его болезни), а преемники генералиссимуса даже не удосужились хотя бы раз — а он пытался прорваться к ним неоднократно — принять и выслушать писателя. Было видно, что Фадеев им уже неинтересен. Этой ситуацией решили воспользоваться его противники в секретариате СП.
В один из дней 1954 года, когда Фадеева в очередной раз увезли «лечиться», Сурков собрал внеочередное и бесповестное (так он сам выразился) заседание президиума Союза писателей. Присутствовавшая на нем В. Герасимова вспоминает:
«Один за другим стали выступать «клиенты» Суркова из сложившегося блока противников Фадеева. Сурков как бы оставался в тени. И открыл заседание он в своей характерной манере — простенько и смиренно: «Товарищи, собственно, по вашему желанию я собрал вас, чтобы потолковать… Заседание без повестки, без плана, потолкуем по душам». Уверена, что из чувства предосторожности не было стенографистки. И первым выступил не он, а ближайший в те годы его подручный К. Симонов, затем деревянно-тупой, но ловкий в сфере «продвижений» В. Кожевников, затем неглупый, довольно образованный карьерист А. Чаковский и еще нечто подобное… В скорбно-негодующем тоне говорили, что положение в Союзе немыслимо, что с Фадеевым нельзя работать, что его порок недопустим и губит дело и т. д. и т. п. Сурков с трудом сдерживал готовое прорваться удовольствие…
Постепенно в ходе собрания стала догадываться об истинном его значении. Только один или два человека — члены президиума из национальных республик (фамилий не помню) — страстно, но беспомощно выступили в защиту Фадеева… Но их выступления, конечно, не перевесили приговора спевшейся группы. Приговор «порочному» Фадееву был общий. И пошел в высшие инстанции. Вскоре Фадеев уже был отставлен от должности генсека, а также переведен из членов ЦК партии в кандидаты ЦК…»
Как ни странно, но свою отставку с поста руководителя Союза писателей Фадеев воспринял спокойно. Видимо, с какого-то времени он стал понимать, что она неизбежна, и успел к этому подготовиться. К тому же польза от этого тоже была — времени для творчества у Фадеева появилось достаточно. К тому моменту идея романа «Черная металлургия» благополучно была похерена (по задумке автора, в книге молодое поколение разоблачает вредителей, а оказалось, что «вредители» были правы). Написав лишь восемь глав, Фадеев роман забросил и стал вынашивать планы новой книги. Весной 1954 года несколько десятков страниц появилось из-под пера писателя (первыми слушателями нового произведения были Е. Ф. Книпович и И. Л. Андроников). Однако на этом дело и застопорилось. Больше к этой книге Фадеев не возвращался. Почему? Может быть, из-за проблем со здоровьем, но скорее всего Фадеева затянули в свой водоворот новые события. В 1955 году приоткрылись ворота лагерей ГУЛАГа, и на свободу потихоньку стали возвращаться те, кого Фадеев прекрасно знал, — его коллеги-писатели, друзья еще по Гражданской войне. Некоторые из них не могли простить Фадееву своего ареста и заточения и спрашивали с него по большому счету. Известны несколько случаев, когда Фадееву публично бросали такие обвинения в лицо. К примеру, так поступила Анна Берзинь, которая демонстративно не подала Фадееву руки в клубе Союза писателей. И на всех творческих встречах она потом не переставала повторять: «Нас всех посадил Сашка!»