Дедушка наш был человеком с большим размахом, любил повеселиться и погулять. Возвращаясь из Питера, он устраивал гулянье на несколько дней. Ведрами выставлялось вино – пей сколько хочешь и кто хочет. И пьет и гуляет чуть не все село. Игра на гармонях, песни, пляски, смех не смолкали иной раз по неделе. Но потом, когда отгуляет, дедушка начинал подсчитывать каждую копейку и, по словам нашей матери, ворчать, что "много соли съели, много спичек сожгли".
Наша мать была единственной девочкой в доме Титовых и поэтому была любимицей. Она была стройна, красива, лучшая песенница на селе, играла на гармони, умела организовать веселую игру. Вообще в доме Титовых молодежь жила весело, и сам дедушка поощрял это веселье. Мать рассказывала, что одних гармоний у них стояло несколько корзин (гармони тогда были маленькие – "черепашки").
Совершенно иной жизнью в своей семье жила бабушка Наталья. Она была человеком тихим, кротким, добрым и ласковым. Была она набожна и любила ходить по церквам и монастырям. Часто она брала с собой и Сергея.
В одной из своих автобиографий Сергей писал: "Помню лес, большая канавистая дорога. Бабушка идет в Радовецкий монастырь, который от нас верстах в 40. Я, ухватившись за ее палку, еле волочу от усталости ноги, а бабушка все приговаривает: "Иди, иди, ягодка, бог счастья даст".
Часто собирались у нас дома слепцы, странствующие по селам, пели духовные стихи о прекрасном рае, о Лазаре, о Миколе и о женихе, светлом госте из града неведомого.
К тому времени, когда в эту семью вернулась наша мать, женились дядя Ваня и дядя Саша и у дяди Саши уже были дети. Чтобы не быть обузой, мать оставила Сергея дедушке, а сама ушла на заработки. В это время дедушка наш был уже разорен. Две его баржи сгорели, а другие затонули, и все они были не застрахованными. Теперь дедушка занимался только сельским хозяйством.
Неграмотная, беспаспортная, не имея специальности, мать устраивалась то прислугой в Рязани, то работницей на кондитерской фабрике в Москве. Но несмотря на трудную жизнь, на маленький заработок, из которого она выплачивала по три рубля в месяц дедушке за Сергея, она все время просила у нашего отца развод. Любя нашу мать и считая развод позором, отец развода ей не дал, и, промучившись пять лет, мать вынуждена была вернуться к нему. Через год у матери народилась моя сестра Катя.
Когда вернулась наша мать в дом Есениных, семья разделилась. Бабушка Груша осталась с нашим отцом, и дом достался им, а дядя Ваня со своей семьей выстроил себе новый дом на другой усадьбе.