Учитывая важность строительства мощного форпоста для отражения вероятного нападения на Петербург, Барклай-де-Толли (в то время профильный министр) в марте 1810 г. поручил военному инженеру Е. Гекелю в рамках плана по укреплению западных рубежей выбрать место для строительства крепости. В соответствующем письме указывалось на необходимость скорейшим образом начать подготовительные работы. Для этого предлагалось использовать остатки старых построек XVI века, а крепость строить «без каменной одежды».
Крепость планировалось создать за 3 года. Ее вооружение должны были составлять 595 крепостных орудий, из них 110 в предмостном укреплении. Эти цифры необходимо рассматривать, учитывая, что в начале 1812 г. Россия на западе имела немногим более 930 орудий. Гарнизон крепости предусматривался в 4 500 человек в мирное и 7 000 человек в военное время.
Осенью 1810 г. комендантом незаконченной крепости был назначен артиллерист генерал-майор Г. П. Уланов. После этого между комендантом и главным инженером начались разногласия по поводу порядка работы. Это, соответственно, вместе с дороговизной строительных материалов, нехваткой времени и наступлением зимы срывало планы строительства. Фактически к середине 1811 г. была выполнена только треть работ.
Несмотря на незавершенность строительства, 14 июля 1811 г. Динабургская крепость была объявлена крепостью первого класса, хотя строительные работы продолжались и дальше – вплоть до 28 июня (10 июля) 1812 г., когда войска второго армейского корпуса маршала Удино стали угрожать гарнизону крепости.
Учитывая невозможность постройки крепости до лета 1812 г., командование приняло решение сосредоточиться на строительстве мостового укрепления. Большое внимание уделялось также перевозке части запасов из Динабурга в глубь страны. Начало военных действий ознаменовало и начало подготовки крепости к обороне.
Штурм крепости продолжался три дня – с 1 (13) до 4 (16) июля. Маршал Удино, не ожидавший упорного сопротивления, бросал в бой все новые и новые войска. Обороной руководил Уланов, в его распоряжении было 2 500 человек. Под его руководством находились также артиллерийские расчеты, использовавшие тактику перетаскивания пушек с колесными лафетами для смены позиций ведения огня. В результате создавалось впечатление, что число орудийных стволов в крепости больше, чем предполагалось.
Но почему же русским все-таки пришлось оставить крепость Динабург? Известно, что в девять часов утра 3 (15) июля в крепости по неизвестной причине взорвались 370 боевых артиллерийских зарядов, сложенных близ батарей у реки Западная Двина для обороны крепости, погиб 21 человек. Потеря в результате взрыва артиллерийских зарядов, а также непрерывные атаки в течение третьего дня побудили командование начать подготовку к оставлению крепости Динабург и отходу из нее русских войск. Но вечером указанного дня маршал Удино получил приказ отступить и двигаться на соединение с войсками короля Неаполитанского маршала Мюрата. Ночью французы сняли осаду Динабурга и стали отходить. Вслед им был выслан кавалерийский отряд, который завязал бой с арьергардом французской колонны и захватил в плен около 80 человек. Фактически это был первый случай захвата пленных в таком количестве.