После смерти Пелагеи Николаевны решили ограничить расходы, которые были велики. Переменили квартиру, но жизнь была уже налажена на широкую ногу. На жалованье учителям шло более восьми тысяч. Многие расходы отмечены темно: отмечались выдачи по назначению четырехсот рублей; разъезды и подарки — тысяча двести рублей.
Разъезды производились на собственных лошадях; вероятно, расходы по назначению и подарки вместе скрывали не столько разъезды, сколько взятки.
В 1841 году в феврале уездный крапивенский суд признал покойного графа Николая Ильича в обвинениях, выдвинутых Н. А. Корякиной, невиновным.
Главные дела устроились, и Александра Ильинична Остен-Сакен поехала с горничной Гашей, которая перешла в ее ведение после смерти бабушки, в монастырь — Оптину пустынь. Младшие дети — Дмитрий, Лев и Мария — с тетушкой Татьяной Александровной поселились после смерти бабушки в деревне, Николай и Сергей оставались в Москве.
1841 год был годом голода. Чтобы не разорить имение и как-нибудь сохранить крестьянскую силу, которая была нужна для того, чтобы мужики могли тянуть свое тягло, продали деревню Неручь и на эти деньги кое-как помогли крестьянам перебиться.
Кроме барского дома, все жили очень сжато, и даже господским лошадям была уменьшена выдача овса. Лев Николаевич вспоминал, как жалко было детям своих лошадей, как ходили дети на крестьянские поля и обшмыгивали руками овсяные колосья, набирали подолы зерна и скармливали своим лошадкам.
В тот год овес был пищей не лошадей, а людей. Но лошади были ближе к дому — их больше жалко. И так поступал и справедливый Дмитрий и добрый Лев, который сообразил свою ошибку через много лет.
Так жили летом все в Ясной Поляне, зимой наезжали в Москву. В Ясной Поляне было тихо, скучно, но все было понятно, а жизнь в Москве разваливалась.
Осенью 1841 года в Оптиной пустыни умерла голубоглазая тетка Александра Ильинична. В памяти Толстого этот случай связался с другими воспоминаниями: Александра Ильинична болела, Татьяна Ергольская к ней поехала, дети остались с учителем Федором Ивановичем и со странницей Марьей Герасимовной. Играли они как хотели. Была у них черная собака — мопс, сажали они эту собаку на высокое сиденье, которое называли троном.
Собаке царское место не нравилось, и она все время спрыгивала с трона. Дети смеялись. Марья Герасимовна не обращала на это внимания, монотонным голосом читая псалмы.