В конце дня французы вошли в Красный, отогнав при этом казаков. Как уже упоминалось, французский император планировал остаться в Красном на несколько дней, чтобы, прежде всего, соединить все свои корпуса.
После полуночи Наполеон обнаружил огни русского летучего отряда на юге от Красного. Оценив их изолированное положение от главной армии Кутузова, он приказал гвардии организовать внезапную атаку. Командир гвардии разделил ее на три колонны и начал движение. Этот план был очень удачным: казаки были захвачены врасплох. Несмотря на отчаянное сопротивление, отряд был полностью разбит и потерял половину людей пленными и убитыми. Но отсутствие кавалерии у французских гвардейцев не позволило организовать преследование отступающих казаков.
Тот же Давыдов так описывал эти события: «…в ту же ночь Ожаровский поражен был в селе Куткове. Справедливое наказание за бесполезное удовольствие глядеть на тянувшиеся неприятельские войска и после спектакля ночевать в версте от Красного, на сцене между актерами. Генерал Роге, командовавший молодою гвардиею, подошел к Куткову во время невинного усыпления отряда Ожаровского и разбудил его густыми со всех сторон ружейными выстрелами. Можно вообразить свалку и сумятицу, которая произошла от сего внезапного пробуждения! Все усилия самого Ожаровского и полковника Вуича, чтобы привести в порядок дрогнувшие от страха и столпившиеся в деревне войска их, были тщетны! К счастью, Роге не имел с собою кавалерии, что способствовало Ожаровскому, отступя в Кутково, собрать отряд свой и привести оный в прежде бывший порядок, с минусом половины людей».
На следующий день, 4 (16) ноября, после обеда, к Красному приблизился корпус Евгения Богарне. Милорадович, который по-прежнему находился на Смоленской дороге, нанес удар по этой колонне французов. В этом столкновении корпус вице-короля потерял 2 000 только пленными от своих 6 000 (по другим сведениям – не больше 1 500), а также багаж и орудия. Потери российских войск составили до 1 000 человек. Богарне спасло лишь то, что Кутузов традиционно не желал большой битвы и приказал Милорадовичу отойти поближе к основной армии. Когда стемнело, остатки корпуса Богарне обошли расположение Милорадовича с севера и, сопровождаемые казаками, добрались до Красного.
В этот же день к Красному прибыли основные силы Кутузова, которые расположились между Новоселками и Шиловым. Накануне этого, с большими силами французов столкнулся Сеславин. Считая, что это был сам Наполеон (на самом деле – корпуса Жюно и Понятовского), он сообщил об этом Кутузову. Вечером под давлением решительно настроенных Толя и Коновницына Кутузов запланировал атаку Красного на утро следующего дня.