Приехали в Казань и родители отца. На одно из свиданий пошли все вместе. Но и в беде свекровь и невестка не сумели объединиться. В тюрьме они вновь жестоко поссорились, чем довели арестанта до слез. Свидание пришлось прекратить раньше времени. Позже, немного успокоившись, они нашли в себе душевные ресурсы для того, чтобы послать узнику совместное письмо и хоть как-то его утешить.
Полгода провел Лев Борисович в тюрьме, в одиночке. Потом его освободили под гласный надзор полиции. Проживание в губернских городах ему было запрещено.
И снова семья в дороге. Сначала они приехали в деревню Кубанской области, неподалеку от Армавира. Потом отец получил место врача в небольшом городке Ахтырка на берегу Азовского моря. И наконец они осели в Майкопе.
С тех пор Женя полюбил дороги, переезды, новые места, новые впечатления. И даже, став взрослым, когда колеса начинали выстукивать знакомый мотив, а за окном мелькали перелески, поля, деревни, он всякий раз испытывал радость. В дороге высвобождалось время для раздумий, уходила суета сиюминутных дел. «По дороге в Псков» — первая, можно сказать, дневниковая запись в его жизни, с которой началась «Тетрадь № 1» 1928 года: «Когда я ездил в Псков, — я поумнел. В дороге человек умнеет. Пока он сидит на месте, любой пустяк: скверный разговор, корректура, заседание — могут заслонить от него весь мир. В дороге ты оторвался от всего, и все видишь. Я понял всё: что нужно делать, как быть, как интересно стоят вагоны на рельсах, какая трава».
В дороге родилась его чудесная новелла «Пятая зона». За те недолгие минуты по дороге из Куоккалы в Териоки (так ещё все называли Комарово и Зеленогорск) вспомнилось вдруг детство и возник замысел воспоминаний — некая смесь мемуаров, рассказов, зарисовок, мыслей, портретов друзей и недругов. Лучшая, пожалуй, интереснейшая книга его жизни.
«Но вот, наконец, совершается переезд в Майкоп, на родину моей души, в тот самый город, где я вырос таким, как есть. Все, что было потом, развивало или приглушало то, что во мне зародилось в эти майкопские годы», — запишет много лет спустя Евгений Львович. Шварцы приехали в Майкоп весной 1900 года. Жене шел четвертый год. Городская больница, куда поступил на службу Лев Борисович, сняла им домик на Георгиевской улице неподалеку от городского сада, реки Белой и рынка — главных достопримечательностей города.
Окна комнаты выходили на восток, и Женин день начинался солнцем. Оно пробивалось сквозь листву деревьев и щели в рассохшихся ставнях и звало на улицу, в сад. Он соскакивал с постели и бежал ему навстречу. Но на его пути вставала мама. Она заставляла делать массу скучных дел — надевать чулки и сандалии, чистить зубы, умываться с мылом… Потом нужно было ещё пить молоко и непременно с хлебом. Мария Федоровна говорила, что ему пора уже вырабатывать хорошие привычки. А уж потом ему разрешалось выйти во двор.