После войны, когда окружение Сталина соревновалось в угодничестве, встречи с ним стали редкими. Почти все вопросы (в том числе и военные) теперь решались его заместителями. Наш наркомат был «упразднен». Фактически наркомом или министром обороны являлся Булганин. С флотскими делами стало совсем худо. Не любя флота, а также не желая разбираться в его сложных и дорогостоящих проблемах, он старался где только можно «задвинуть» их на задний план или решить в пользу Наркомсудпрома…
Редко появляясь в Кремле (а больше на ближней даче), Сталин после настойчивых просьб принимал всего на несколько минут, как всегда, в окружении своих ближайших помощников. Тратить время на «приятные» доклады мне не хотелось, и я обычно начинал с самого трудного, а стало быть, с самого неприятного. Большинство из присутствовавших слушали это недоброжелательно или, в лучшем случае, безразлично. Булганин же метал взгляды: доклады, как правило, шли вразрез с его мнением или прямо содержали жалобу на него. Если Сталин поддерживал меня, то все поддакивали, и принималось нужное мне решение. Чаще же всего было иначе. Стоило ему высказать сомнение в правильности моих доводов, как все дружно утверждали, что я не прав. В таком случае разумнее всего было «сматывать удочки». Но я по своему упрямому характеру продолжал настаивать и доказывать. Я не подходил для того, чтобы безропотно подтверждать все глупости Булганина, а потом, когда ему будет угодно, так же безропотно подставлять свою голову под удар за его ошибки…
Когда в 1951 году при загадочных для меня обстоятельствах я снова очутился в должности министра ВМФ, физически слабый Сталин уже совсем не хотел слышать про недостатки. Зная об этом, окружение тешило его докладами розового цвета. «Не следует беспокоить вождя», — сказал мне однажды Маленков, когда мы отправлялись на дачу. Он знал мой строптивый характер. Но и я знал, что предметом разговора будет как раз мой большой доклад Сталину о крупных недостатках в судостроении. Откладывание из года в год всех сложных вопросов по судостроению привело к тому, что выпускались только старые корабли. Вот об этом я и написал. Когда расположились за столом, Сталин поднял мой доклад и, обращаясь ко всем, спросил: «Так ли это?» — «Кузнецов сгущает краски», — бросил кто-то реплику. «Ну, посмотрите», — ответил Сталин и бросил доклад на середину стола.
Перешли к другим вопросам, и я понял, что все это мне даром не пройдет. Вместе со своим докладом я был отдан в руки «тройки»: Булганин, Берия, Маленков. Вот здесь и нужно искать причины моих дальнейших злоключений. Булганин окончательно возненавидел меня. Находясь тогда в тесной дружбе с Хрущевым, он передал ему всю свою ненависть ко мне. Но это уже другая тема.