Замысел большого произведения о своих детских и отроческих годах вынашивался Маршаком в течение многих лет.
Тема воспоминаний о детстве была близка писателю — одному из зачинателей советской детской литературы. В дорогих сердцу воспоминаниях Маршак как бы проверял свои наблюдения над жизнью ребенка, свое знание его внутреннего мира, психологии.
В самом начале творческого пути, когда еще не определились четко основные творческие интересы молодого литератора, — в 1911 году — Маршак напечатал два рассказа, темой которых послужили воспоминания об отроческих годах, проведенных в Острогожске — родном городе поэта. В рассказе «Полузабытое» («Всеобщая иллюстрация», н. 14–15, 10 апреля 1911 г.) был изображен мальчик-горбун, товарищ детства; в другом рассказе — «География» («Всеобщий ежемесячник», 1911, н. 3) — дан остросатирический портрет учителя географии острогожской гимназии Павла Павловича Селивановского.
Тот же мальчик-горбун появился на страницах рассказа, написанного Маршаком приблизительно в 1930 году; а учитель географии Павел Павлович предстал перед читателем в рассказе «Второгодник Баландин», созданном в то же время. Оба рассказа вместе с двумя другими («Война трех дворов» и «Шура Ястребова») вошли в цикл рассказов, о детстве, задуманный в эти годы писателем.
Другие замыслы со временем оттеснили на второй план эту работу. В письме от 29 апреля 1940 года к острогожскому знакомому — однокашнику по гимназии — Г. Н. Яковлеву поэт признавался: «Я отлично помню Острогожск, хоть и уехал из него мальчиком. С Острогожском связано у меня очень много милых воспоминаний — о школьных товарищах, о некоторых учителях… Когда-нибудь, надеюсь, скоро, я напишу об этих далеких годах и тогда непременно пришлю Вам свои воспоминания». Но этому не суждено было сбыться вскоре: начавшаяся война нарушила многие планы поэта. Только через десять лет он возвратился к старому замыслу.
В 1951 году Маршак задумал создать автобиографическую повесть в стихах (о планах создания такой повести он писал в «Литературной газете» от 5 января 1952 года). Но со временем план меняется; вместо повести поэт пишет цикл стихотворений о своих отроческих годах, который под названием «Времена и люди (Из книги „Начало века“)» печатает в декабрьском номере журнала «Новый мир» за 1954 год; в цикл вошли стихи «Владимир Стасов», «Начало века», «Молодой Горький», «Шаляпин», «Ялта» (см. т. 5 наст. изд.).
Опубликовав цикл стихов «Времена и люди», Маршак не отказался от старого замысла, большого произведения о своем детстве. Теперь работа идет над повестью в прозе; она активизируется в 1956–1957 годах в связи с подготовкой четырехтомного собрания сочинений поэта, в четвертый том которого по плану издания должна была войти новая повесть. Уже в октябре 1957 года Маршак сообщил острогожским пионерам, что он закончил «первую часть автобиографической повести». Однако на окончательную отделку повести понадобилось еще два года, и лишь в августе 1959 года Маршак, наконец удовлетворенный результатами работы, передает рукопись повести в журнал «Новый мир».