В Олторпе она имела куда больше пространства для своих увлечений, чем в Парк-хаусе: сам дом был куда больше, а уж пространство вокруг него и вовсе не шло ни в какое сравнение. Диана танцевала в огромных залах замка, каталась на перилах лестниц, играла в крикет, ездила на лошадях, устраивала пикники. Мачеха вносила коррективы в жизнь обитателей Олторпа, за что ее и невзлюбили дети. Диана не даст и этому чувству ненависти угаснуть с годами. В ее сердце, открытом, готовом помочь чужим мучающимся людям, не было места для понимания близких.
Среди тех, с кем сошлась Диана в Олторпе, были камердинер и его жена. С ними она любила провести время, приезжая в замок из школы на выходные или каникулы. Жена камердинера считала Диану совершенно лишенной высокомерия, застенчивой, «чудесной девушкой» и добавляла: «Ее любили все». Думается, Диана могла наладить отношения и внутри семьи, но она была упряма и не умела прощать. Даже королева-мать позже отмечала это качество: «Знаете, с женщинами из рода Спенсеров так нелегко!» А родственница Дианы продолжила мысль королевы: «Они никогда и ничего не прощали. Это была их фамильная особенность. Мне кажется, Диана не умела дружить и поддерживать личные отношения именно в силу этой особенности».
С учебой в ту пору дела как шли плохо, так и продолжали идти: Диана заваливала экзамен за экзаменом. Ее собственные воспоминания, по обыкновению, немного разнятся от воспоминаний других людей. Например, директриса школы Уэст-Хит не припоминает, чтобы Диана к ней приходила заплаканной и расстроенной по поводу отставания в учебе. «Не помню, чтобы мне приходилось ее успокаивать и приносить ей таблетки перед экзаменами, хотя с другими девочками такое случалось. Я не замечала, чтобы ее охватывала паника на экзаменах». Сама Диана все валит в одну кучу — и зависть к брату-отличнику, и собственную тупость, и даже полноту.
Друзья вторят директрисе: они не думали, что Диана глупа. Причинами неудач они считали что угодно, но не отсутствие ума: банальную лень, неумение концентрироваться на нелюбимых занятиях, нежелание даже приниматься за дело (в то время как, например, танцами она могла заниматься часами, и несмотря на не самые выдающиеся данные, в этом Диана достигла весьма впечатляющих успехов). Есть и те, кто вспоминает о полученной в результате развода родителей психологической травме: «Ей хватало сообразительности, но не хватало уверенности. В состоянии эмоциональной травмы трудно сосредоточиться на обучении, поэтому она и не достигла больших успехов в школе. Ее сознание просто блокировало способность концентрироваться, впитывать и обрабатывать информацию».