Когда графиня Уэстморлендская передала Фитцрою слова Веллингтона, она заметила у него на глазах слезы.
Герцог с возрастом стал слабеть и становился рассеянным. Большую часть его работы приходилось выполнять Фитцрою. Старый воин мог заснуть посреди беседы. Тогда посетители на цыпочках выходили из его кабинета и шли за решением к военному секретарю. В 1852 году старый герцог умер, сидя в кресле у окна в своем кабинете. Лорд Фитцрой прослужил с ним вместе более сорока лет. В течение всей жизни он с гордостью вспоминал об этом.
Лорд Фитцрой надеялся сменить герцога Веллингтона на посту главнокомандующего, однако это назначение получил лорд Хардиндж, а самому Фитцрою был предоставлен пост командующего артиллерией. Такое назначение было обидным и унизительным, поскольку лорд Хардиндж, хотя и старший по возрасту, был младше по званию. По словам Чарльза Гревилля, «Фитцрой Сомерсет был гораздо более популярен среди военных, однако я не сомневался в назначении на пост командующего армией Хардинджа, который пользовался особым покровительством при королевском дворе». Как бы в качестве компенсации в октябре того же года лорду Фитцрою был предложен титул пэра. Он долго колебался, прежде чем принять его, так как не был уверен, что этот титул действительно ему нужен. Однако королева проявила настойчивость. По этому поводу принц-консорт писал премьер-министру:
«Будет очень жаль, если лорду Фитцрою придется отказаться от пэрства по финансовым соображениям. В то же время представляется затруднительным освободить его от выплаты соответствующих взносов. При данных обстоятельствах, когда для общества так важно плодотворное сотрудничество Фитцроя с лордом Хардинджем, королева считает недопустимым оставить его без награды, тем самым еще более усугубив его обиды. Поэтому она готова взять на себя бремя финансовых обязательств лорда Фитцроя как пэра».
Так в октябре 1852 года лорд Фитцрой Сомерсет стал первым лордом Рагланом.
Все опасения, что уязвленное самолюбие осложнит его отношения с лордом Хардинджем, оказались напрасными. Он приступил к выполнению новых обязанностей с обычным для него энтузиазмом и энергией. Как позже он признался сыну, «новая работа и новые люди настолько увлекали, что вряд ли я чувствовал бы себя счастливее, окажись даже в кресле главнокомандующего».
Трудолюбие лорда Раглана было его счастьем, так как работа требовала всех сил. Обычно по вечерам ему приходилось разбирать дома накопившиеся документы. Сейчас уже трудно сказать точно, в чем заключался круг его обязанностей. За организационные вопросы в армии, которые, по признанию принца Альберта, сводились к стремлению максимально ее сократить, отвечали семь более или менее самостоятельных ведомств. Это вносило неизбежную путаницу, приводило к дублированию обязанностей, взаимному недоверию чиновников и затрудняло контроль за выполнением мероприятий.