Ковер был изготовлен во славу могущественного епископа, кафедральный собор которого он должен был украшать. Вероятно, с того самого времени Одо в упоении собственными успехами стал замышлять нечто гораздо более амбициозное. В 1081 году, когда конфликт между папой и императором вступил в свою наиболее острую фазу, обнаружились расхождения во взглядах Одо и его брата-короля: Вильгельм инстинктивно принял сторону императора, тогда как Одо симпатизировал Григорию VII. Как сообщает историк Ордерик Виталий, он распорядился купить для себя дворец в Риме и поддерживал секретные контакты с некоторыми высокопоставленными представителями папской курии. Целью его интриг было ни много ни мало занятие папского престола!
Есть и еще одна версия событий (впрочем, вполне согласующаяся с тем, что сказано выше): в конце 1082 года верные люди доставили Вильгельму в Нормандию известие, что Одо собирает войска, намереваясь, без разрешения короля, покинуть Англию, чтобы отправиться на помощь папе, осажденному в Риме.
Вильгельм незамедлительно сел на корабль и прибыл на остров Уайт, где Одо был уже в полной готовности к отплытию. Король задержал его, установил над ним надзор и созвал совет. Могущество и престиж Одо были таковы, что все, несмотря на гнев государя, молчали, сомкнув уста. Тогда Вильгельм, вопреки обычаю, сам взял слово, выступив в роли обвинителя и судьи одновременно. Он представил брата как мятежника и приказал незамедлительно арестовать его. Однако никто не осмелился поднять руку на епископа. Тогда Вильгельм встал и сам схватил его. Одо отбивался, кричал, взывал к справедливости, ссылаясь на свое епископское достоинство, делающее его неподсудным любому приговору, кроме того, который прозвучит из уст самого папы. «Не епископа Байё приговорил я, — ответил Вильгельм, — а графа Кента!» Вероятно, столь остроумный выход из щекотливого положения ему подсказал Ланфранк. Чары рассеялись. Одо схватили и доставили в замок Руана, где он должен был находиться в заключении — весьма комфортном заключении, ибо его тюрьма больше напоминала резиденцию, находящуюся под надежной охраной. И тем не менее благоволение короля сменилось на гнев. Одо сумел вернуться в Англию лишь после смерти Вильгельма. Спустя какое-то время он, рассорившись с новым правителем королевства, лишился всех своих имений и вынужден был вести жизнь изгнанника. Отправившись в крестовый поход, он умер в Палермо в 1097 году на руках своего племянника Роберта Коротконогого.
Из старых соратников у Вильгельма остались только Ланфранк, овеянный славой восьмидесятилетний старец, столп католической церкви, Роже де Монтгомери и брат Роберт де Мортэн, человек не великого ума, зато отважный. Он, являясь первым после короля землевладельцем Англии, сохранил за собой и графство Мортэн в Нормандии, самый большой во всем герцогстве фьеф, включавший в себя около 40 населенных пунктов, в десяти из которых были рынки. В 1082 году Роберт в присутствии герцога-короля подписал документ об учреждении коллегиальной церкви в Мортэне, которой он уступил часть своих прав на разведение коров и овец в графстве, преподнеся ей при этом в дар роскошное, богато иллюстрированное англосаксонское Евангелие.