Ирония судьбы: никто — ни крестоносцы, ни греки — не хотел войны. Жители Константинополя имели перед собой одну цель: избавиться от вандалов, разрушивших их любимый город и доведших их до нищеты. Франки, со своей стороны, не забыли о причине, по которой оставили свои дома. Им страшно не хотелось оставаться среди этого никудышного народа, да еще и общаться со схизматиками. Даже если греки отдадут долги, крестоносцы ничего не выиграют: придется еще расплачиваться с Венецией.
Ключ к разрешению этой загадки был у Венеции, или, что более точно, у Энрико Дандоло. Он в любой момент мог дать приказ к отплытию. Если бы он так поступил, то и крестоносцы почувствовали бы облегчение, и византийцы бы возрадовались. Он не делал этого, потому что ждал, когда франки отдадут ему долг, а те, в свою очередь, надеялись на деньги, обещанные им Алексеем и его отцом. На самом деле этот долг представлял для него относительно малый интерес, едва ли больший, чем сам поход. Он думал о куда более великих вещах: о падении Византийской империи и установлении на троне Константинополя венецианской марионетки.
Итак, надежды на мирный договор растаяли. Дандоло заговорил с франкскими союзниками по-другому. Нечего ожидать от Исаака и Алексея: они не постеснялись предать друзей, которым были обязаны троном. Если крестоносцы хотят получить то, что им было обещано, придется это взять силой. С моральной точки зрения они совершенно правы: вероломные Ангелы не могут ожидать проявления к себе лояльности. Надо войти в город с собственным лидером, назначить его императором, и тогда Венеция не только получит по долгам, но и оправдает весь поход. В этом их шанс, они должны им воспользоваться сейчас, потому что такой возможности больше не представится.
В Константинополе все согласились с тем, что Алексей IV должен уйти. 23 января 1204 года в храме Святой Софии собрались сенаторы, духовенство и представители народа — объявить Алексею о его смещении, а затем избрать преемника. Обсуждение шло три дня, после чего остановились на полном ничтожестве по имени Николай Канав. Тот взял власть в свои руки.
Алексей Дука по прозвищу Мурцуфл (что значит «нахмуренный») — брови у него были черные, косматые и сходились у переносицы — происходил из аристократической семьи. В его роду уже было два императора, а теперь он занимал должность протовестиария, что давало ему доступ к императорским покоям. Поздно вечером он вошел к спящему Алексею, разбудил его и сказал, что подданные восстали против него и предложил бежать. Закутав императора в длинный плащ, вывел его из дворца через боковую дверь, где уже дожидалась группа заговорщиков. На незадачливого юношу надели оковы и отвели в темницу. Две попытки отравить его оказались безуспешными, в конце концов Алексея задушили. Примерно в это же время умер его слепой отец. Рассказывая об этом в своих хрониках, Виллардуэн с неподражаемой наивностью приписывает эту смерть шоку, полученному отцом от известия о судьбе Алексея. Похоже, Виллардуэну и в голову не приходит, что смерть от «шока» могла быть вызвана искусственным путем.