Предчувствия не обманули его: разгневанный Николай решил примерно наказать дядю: его лишили всех офицерских званий, отчислили со службы, воспретили въезд в Россию. Новую жену ни в России, ни за границей разветвленная романовская родня, рассеянная по всей Европе, как особу царских кровей не признала. Смягчился лишь принц-регент Баварии Луитпольд (в принципе, теперь птица невысокого полета, ибо Бавария уже стала, хоть и на особых условиях, неотъемлемой частью объединенной Германской империи), пожаловавший отверженной женщине титул графини Гогенфельзен. В глазах же царской семьи и высшего света Российской империи Ольга Валерьяновна навсегда осталась «порочной и безнравственной женщиной, хищницей», окрутившей простодушного Павла Александровича. Что касается его детей, Марии и Дмитрия, то над ними учредили официальную опеку великий князь Сергей Александрович и его супруга Елизавета Федоровна. Сергей Александрович в ту пору исполнял обязанности генерал-губернатора Москвы, поэтому подростки переехали в первопрестольную.
Бездетная Елизавета Федоровна чрезвычайно радела о своих племянниках, столь прискорбно осиротевших при живом отце. Она всем сердцем стремилась как можно лучше исполнить свой долг приемной матери, но, судя по их воспоминаниям, получалось это у нее не особенно хорошо. Рано лишившись матери, великая княгиня получила воспитание при дворе своей бабки, королевы Великобритании Виктории, которая не баловала детей особой нежностью. На первом месте стояло исполнение долга и обязанностей отпрыска венценосной семьи, что не предполагало никакой отдушины для неуместного проявления простых человеческих чувств. Дети занимались с несколькими преподавателями, их приобщали к труду и благотворительности, но вот пошалить или излить накопившуюся на душе тоску возбранялось. Что касается общения со сверстниками, то их число ограничивалось сыновьями князя Юсупова, Николаем и Феликсом, хотя они были несколько постарше. Мария и Дмитрий дружно пришли к выводу, что любящие их тетя и дядя – люди чрезвычайно черствые.
4 февраля 1905 года член боевой организации эсеров Иван Каляев метнул бомбу в карету великого князя Сергея Александровича, и того буквально разорвало на куски[57]. Волей-неволей императору пришлось дать согласие на приезд Павла Александровича в Россию, дабы тот мог проститься с братом. Великий князь со второй женой проживал под Парижем и уже обзавелся новыми потомками: помимо сына Владимира, в 1903 году родилась дочь Ирина, а в 1905 – Наталья, будущая звезда подиумов парижской моды. Хотя Николай II и заявил дяде, что «больше не сердится на него», но вернуться в Россию вместе с новым семейством не разрешил. Сходная ситуация произошла в 1908 году, когда Мария выходила замуж за сына шведского короля, герцога Зюдерманландского. Этот брак, исходя, естественно, из династических соображений, устроила, в основном, все та же ненавистная тетя Элла, причем согласия Павла Александровича даже не удосужились испросить. Надежды молоденькой Марии Павловны вырваться из московской тюрьмы не оправдались, она попала в леденящую атмосферу шведского двора, и, родив сына, через несколько лет просто-напросто сбежала от равнодушного мужа обратно в Россию.