В конце мая 1504 года Джулио, будучи не в силах успокоиться из-за поступка сводного брата-кардинала, обнаружил местонахождение дона Ринальдо. Не сказав о причине, он попросил Альберто Пио да Карпи и Энеа Фурлано по прозвищу Кабальеро дать ему вооруженных людей и стрелков (во всяком случае, так потом рассказывал Пио). Затем вместе с Ферранте поехал в местечко Ламе, что возле Карпи. Оттуда махнул в Рокка Джессо, забрал дона Ринальдо и вернулся с ним в Ферранте. Узнав, что произошло, Ипполито взбесился и пожаловался Альфонсо, пользуясь тем, что был на тот момент его правой рукой. Альфонсо приказал Джулио явиться к нему в Модену и исключил его из феррарского государства на основании того, что тот нанес оскорбление Боярдо. Ферранте тоже был вызван в Модену. Ему приказано было не выезжать из города, под арест его, правда, не взяли. По свидетельству историка Рикардо Баччелли, сделанного им в августе 1505 года, Лукреция попыталась стать посредницей и призвала Джулио и Ферранте отправить дона Ринальдо от греха подальше в крепость Кастельгранде. Альфонсо написал Лукреции суровое письмо, смысл которого сводился к тому, что незачем ей вмешиваться в это дело: Джулио сильно его обидел, а потому Альфонсо распорядился сослать его в поместье Бресчелло, где каждый день он должен будет являться в комиссариат и не отходить от места ссылки далее чем на две мили. «Мы хотим, чтобы наше решение Вы довели до сведения Никколо Бендидео, нашего секретаря. Пусть предупредит дона Джулио: он должен нам подчиниться. Если же он этого не сделает, знайте. Ваша Светлость, мы прибегнем к другим мерам». Лукреция более поделать ничего не могла, да и несчастный Джулио вынужден был смириться. Преданного Проспери, старинного приспешника Эсте, этот инцидент встревожил, о чем он и доложил Изабелле. Он был уверен, что дон Джулио не осмелится навредить брату-герцогу. Альфонсо и Ипполито, однако, на тот момент очень сдружились, к тому же один жил в Бельригуардо, а другой поблизости, в Вигонце. Виделись они каждый день, и такое единение было для Джулио неблагоприятно.
Изабелла делала все, что могла, старалась смягчить возникшие разногласия. Воспользовавшись рождением Александра, написала Альфонсо, и в этом письме она просила извинить Джулио ради счастливого события, говорила, что «брат не злонамеренно, а по недомыслию совершил ошибку. Сейчас не время, — продолжала она, — копить обиды, и я хочу напомнить об этом достопочтенному кардиналу». Франческо Гонзага тоже вступился за Джулио, и 24 сентября Ферранте написал ему из Реджо благодарственное письмо. Дель Форно (семья этого человека дружила с Альфонсо и Ипполито) рассказал ему об усилиях, которые прилагал Гонзага, заступаясь перед Альфонсо за дона Джулио. Приехав в Реджо, Ипполито попросил Франческо послать верного эмиссара, который бы официально положил конец вражде между ним и Джулио. Благодаря заступничеству Гонзага и согласно написанному 12 октября письму Проспери к Изабелле, Джулио освободили и позволили ему вернуться в Феррару. Проспери оптимистично добавил: «Полагаю, дело это закончено, прежде всего благодаря Вашему Сиятельству».