В 1946 году началось возвращение из эвакуации. Мать Васильева с детским садом вернулась домой, и с этого времени они уже постоянно проживали в Москве, по адресу, где позднее будет находиться штаб «Памяти»: ул. Валовая, дом номер 32, кв. 4. Это была бывшая квартира очень известного старинного русского рода Курбатовых. Полковник Курбатов охранял верхние подступы к Москве. В районе Пятницкой улицы есть Маратовский переулок, а раньше он был Курбатовский. И до сих пор там сохранилось их домовладение, только оно изуродовано за советский период и переустроено. Потом эта семья немного подразорилась. Их отец был сподвижником доктора Боткина, которого потом расстреляли вместе с царской семьей. Известный очень был хирург, терапевт. Знаменитая Боткинская больница названа в его честь. И воспитал огромную семью: это и Наталья Ивановна Курбатова, и Христина Ивановна Курбатова.
Наталья Ивановна Курбатова окончила Строгановское императорское училище, была великолепной художницей, давала маленькому Диме уроки живописи. Христина Ивановна Курбатова была классной дамой гимназии, в совершенстве владела тремя языками, великолепно знала словесность, историю, географию и занималась Диминым воспитанием. Дмитрий Иванович Курбатов — строитель Новоспасского моста, первого, открытого в СССР. Он же потом и пострадал. Его спас Бонч-Бруевич, который бывал в квартире на Валовой, как и Стасова. Были они не как друзья, а как ценители таланта Дмитрия Ивановича Курбатова. Они его и спасли практически от репрессий.
В этой же квартире жил Николай Павлович Анциферов — дядя Коля, как его ласково называл Васильев. Автор книг «Душа Петербурга», «Из жизни городов» и других, 27 лет отсидевший в концлагерях за происхождение, за свою позицию. Именно он привил Дмитрию Дмитриевичу любовь к русской литературе.
«Мне в жизни повезло, — рассказывал Дмитрий Дмитриевич, — меня воспитывали Курбатовы, очень известный дворянский род. Они, очевидно, знали историю моего происхождения, дали мне прекрасное образование, поэтому я получил больше, чем человек, окончивший, скажем, три советских вуза. Меня учили чести, вере, любви к Родине…»
Так что Курбатовы сыграли большую роль в становлении Дмитрия Дмитриевича Васильева как будущего патриарха русского фашизма. Среди их родственников были такие известные фамилии, как Богдановы, Беры, Кипарисовы. Они не принимали советскую власть, но и не уехали из России. Да и сам домовладелец Черенков (он его и построил) тоже не уезжал. Заканчивал свой век управдомом, живя во втором номере этого же дома, и там же умер, хотя почти вся родня уехала. Позднее к Васильеву в организацию пришел внук того самого Черенкова.