На балконах и под балконами усадьбы будущий писатель встречался с Валентиной Шульгиной, своей первой любовью, и этот дом упоминается даже в «Машеньке», первом романе Набокова («Он выходил из светлой усадьбы в черный, журчащий сумрак…», «…солнце ослепило, сверкнуло на концах весел, выхватило телегу с сеном, которая как раз проезжала по низкому мосту, и зеленый скат, и над ним белые колонны большой заколоченной усадьбы александровских времен» – усадьба Рождествено как раз стоит перед мостом через реку Оредеж, по которой можно было плавать на лодке).
Василий Рукавишников в усадьбе изредка устраивал балы, а центром здания был двухсветный зал – не цветный, а светный, такое изящное слово появилось благодаря тому, что в него попадал свет одновременно с первого (там были гостевые и парадные комнаты) и второго (спальни и детские) этажей.
Рукавишников служил по дипломатической линии, часто и надолго выезжал за рубеж, земля была ему без особой надобности. В 1907 году он продал землю в Рождествено, оставив за собой только дом и парк перед ним, хотя и в доме он появлялся редко, даже не каждый год, настолько редко, что сейчас сотрудники дома-музея не могут точно сказать, в какой комнате он ночевал. (Ходят слухи, что, когда он все-таки появлялся в Рождествено, над домом, за которым в его отсутствие следили, поднимался большой флаг, и крестьяне таким образом узнавали, что «барин приехал» и можно к нему идти на поклон с просьбами.) А еще девять лет спустя, в 1916-м, Василий Иванович умер. Семьи у него не было – о его гомосексуальности знали все или почти все. Усадьбу он оставил старшему племяннику, будущему писателю Володе, однако владельцем тот был всего год – потом настал 1917-й, который все решил по-своему.
В здание усадьбы въехало общежитие ветеринарного техникума, а сам техникум находился в Выре – в «нашей Выре». Во время войны в Рождествено стояли фашистские отряды, которые разместили в здании инженерную часть. С 1946 года в усадьбе находилась общеобразовательная школа, с середины 1970-х в здание вселился краеведческий музей «Ленинец» (в усадьбе Набоковых – Рукавишниковых – музей «Ленинец»! Иногда о зигзагах судьбы лучше всерьез не задумываться, иначе сойдешь с ума), и только с 1988 года там находится то учреждение, которое и должно: музей-усадьба Набокова. Еще семь лет спустя, после того как в усадьбе произошел крупный пожар, название официально поменялось на Музей-усадьба «Рождествено», но там сохраняется все, что имеет отношение к Набоковым и Рукавишниковым. В 1995-м пожар начался сверху, в бельведере, и в результате он сгорел полностью. «Родные» стены остались, и, хотя они сами по себе так и стоят обгоревшими, их заштукатурили и закрасили. А вот пол в усадьбе сделали с нуля. И как раз после этого пожара набоковско-рукавишниковскую усадьбу и стали реставрировать под новым, более общим названием.