ЦК партии, бывший в 1922 году и первую половину 1923 года на Воздвиженке, переезжает теперь в огромный дом на Старой площади, 5-й этаж дома отведён для секретарей ЦК и наших секретных служб. Поднявшись на 5-й этаж, можно пойти по коридору направо – здесь Сталин, его помощники и секретариат Политбюро; пойти же по коридору налево – здесь Молотов и Рудзутак, их помощники и секретариат Оргбюро. Если пойти по первому правому коридору, первая дверь налево ведёт в бюро Каннера и Мехлиса. Только через него можно попасть в кабинет Сталина, и то не прямо, а пройдя сквозь комнату, где дежурит курьер (это крупная женщина, чекистка Нина Фоменко). Дальше идёт кабинет Сталина. Пройдя его насквозь, попадаешь в обширную комнату, служащую для совещаний Сталина и Молотова. Сейчас же за ней кабинет Молотова. Сталин и Молотов много раз в течение дня встречаются и совещаются в этой средней комнате.
В кабинет Сталина можно войти только по докладу Мехлиса. Курьерша входит, только если Сталин вызывает звонком. Каннер или Товстуха, если им нужно видеть Сталина, спрашивают его предварительно по телефону, можно ли к нему. Только два человека имеют право входа к Сталину без доклада: я и Мехлис. Мехлис как личный секретарь. Я – потому что мне всё время надо видеть Сталина по делам Политбюро, а дела Политбюро считаются самыми важными и срочными. Я вхожу к Сталину, кто бы у него ни был, что бы он ни делал, и прямо обращаюсь к нему. Он прерывает свои разговоры или своё заседание и занимается тем, что я ему приношу, – дела Политбюро срочнее всех других. Но это моё право и по отношению ко всем секретарям ЦК, и всем советским вельможам. Когда нужно, я вхожу на любое заседание (скажем, например, официального правительства, Совнаркома) или в кабинет любого министра, не ожидая и не докладываясь, и прямо обращаюсь к нему, что бы он ни делал, прерывая его. Это моя прерогатива как секретаря Политбюро – я прихожу только по делам Политбюро, а более важных и срочных нет.
В первые дни моей работы я десятки раз в день хожу к Сталину докладывать ему полученные для Политбюро бумаги. Я очень быстро замечаю, что ни содержание, ни судьба этих бумаг совершенно его не интересуют. Когда я его спрашиваю, что надо делать по этому вопросу, он отвечает: «А что, по-вашему, надо делать?» Я отвечаю – по-моему, то-то: внести на обсуждение Политбюро, или передать в какую-то комиссию ЦК, или считать вопрос недостаточно проработанным и согласованным и предложить ведомству его согласовать сначала с другими заинтересованными ведомствами и т. д. Сталин сейчас же соглашается: «Хорошо, так и сделайте». Очень скоро я прихожу к убеждению, что я хожу к нему зря и что мне надо проявлять больше инициативы. Так я и делаю. В секретариате Сталина мне разъясняют, что Сталин никаких бумаг не читает и никакими делами не интересуется. Меня начинает занимать вопрос, чем же он интересуется.