В то же время случались и грубые ссоры. Однажды Есенин со зла бросил в лицо Зинаиде оскорбительное нецензурное слово. А она, не задумываясь, обозвала этим словом его самого. Есенин схватился за голову и простонал: «Зиночка, моя тургеневская девушка! Что же я с тобой сделал?»
Осенью 1919 года Зинаида Райх с дочерью Татьяной переехали в Москву. С 15 ноября 1919 года она работала во внешкольном отделе Наркомпроса консультантом по искусству в подотделе народных домов и клубов.
Любопытно, как по-разному оценивали Зинаиду Райх близкие друзья Есенина, с одной стороны, и люди, не входившие в их тесный круг, — с другой.
Самым большим ненавистником Зинаиды Райх был Анатолий Мариенгоф. В своих мемуарах «Мой век, мои друзья и подруги» он признавался, что, не любя Зинаиду Райх, обычно отзывался о ней: «Эта дебелая еврейская дама». Он не пожалел злых слов, описывая внешность Райх: «Щедрая природа одарила ее чувственными губами на лице круглом, как тарелка. Одарила задом величиной с громадный ресторанный поднос при подаче на компанию. Кривоватые ноги ее ходили по земле, а потом по сцене, как по палубе корабля, плывущего в качку».
Шершеневич писал: «Райх была при Есенине забитая, бесцветная и злая… Есенин держал Райх в черном теле, был равнодушен к их ребенку и этим сильнее всего огорчал Райх».
А другие люди воспринимали тогда Зинаиду Райх как красавицу, умницу, блистательную женщину, по праву занимавшую свое место в ряду таких выдающихся дам, сумевших не только выжить в страшные годы революции, но и нашедших свое место при новой власти — таких, как Лиля Брик, Лариса Рейснер, Тамара Иванова и другие. К тому же Зинаида Райх вполне успешно делала служебную карьеру — она занимала ответственные посты в советском аппарате (одно время она даже разъезжала по Москве на паре гнедых лошадей), она была близко знакома с Луначарским, Крупской, Маяковским.
И ей совсем не улыбалась перспектива опуститься до роли одной из поклонниц, сопровождавших Есенина из кабака в кабак. Кроме того, она терпеть не могла его друзей и собутыльников — Мариенгофа, Кусикова и других.
Здесь мы подбираемся к одной из главных загадок жизни Есенина: почему разрушилась его семейная жизнь с Зинаидой Райх?
Как известно, инициатором разрыва была Зинаида Николаевна. Хотя так же достоверно известно, что она продолжала его любить. На этот счет существует такое непредвзятое мнение, как мнение Августы Миклашевской, последней любви Есенина, — а ведь женщины ревнуют к прошлым романам своих возлюбленных ничуть не меньше, чем к настоящим. Так вот, Августа Миклашевская утверждала: «Друзья Есенина поговаривали, что Райх не любила Есенина. Нет, она его любила! Только с ним было очень трудно. Да еще и Мариенгоф внушал Есенину, что женитьба и семья поэту не нужны. Зинаида была женщина гордая. Она хотела иметь мужа, как все, а не так, как было с Есениным — по году не виделись».