Но, в конце концов, Мамантов выявил себя сам. После Воронежа ему стало уже не до игры в «кошки-мышки». Казаки повернули обратно к фронту. В пути они сопровождали огромные, растянувшиеся на несколько верст обозы с трофеями. Естественно, такой груз начисто лишил их главного козыря – мобильности. 17 сентября летчик Герасимов с летнабом Гореловым отыскали один из обозов длиной почти в полтора километра и сбросили на него восемь бомб. Согласно докладу экипажа, казаки не поддались панике, а напротив, открыли по самолету бешеную пальбу из винтовок. По возвращении в «Сопвиче» насчитали несколько пробоин, но это было не важно: главное – враг обнаружен!
На следующий день лил дождь, приковавший самолеты к земле. Но он же резко затормозил и без того медленное движение Мамантова. По раскисшим дорогам обозные телеги ползли с черепашьей скоростью. Одним словом, в очередной раз ускользнуть не удалось. И 19 сентября четыре самолета инструкторского отряда обрушили на колонну мамантовцев 18 авиабомб и 15 фунтов стрел. Казаки яростно отстреливались, но ни один аэроплан не был сбит. В налете участвовали «Сопвичи» Братолюбова, Трускова и Кудрина с летнабами Мининым, Карпом и Кошелевым, а также «Ньюпор» красвоенлета Лёвина.
В тот же день командир АГОН Акашев лично вылетел на «Илье Муромце» для бомбардировки полукилометрового белогвардейского обоза, обнаруженного у деревни Истобное. Кроме Акашева, в состав экипажа входили пилот Романов, наблюдатель (штурман) Золотарев и механик Буробин. В самолет загрузили 22 бомбы общим весом 160 кг и 9 кг листовок. Отыскав цель и сбросив на нее бомбы, летчики заметили еще два обоза общей длиной почти в шесть километров. По ним был выпущен боекомплект двух ручных пулеметов.
20 сентября «Илья Муромец» отбомбился по главным силам мамантовцев, стоявшим на привале у реки Бобровая Потудань. В этом налете, вместо Акашева и Золотарева, участвовали в качестве наблюдателей летчики Мельников и Петренко. Боевую нагрузку составляли 160 кг бомб и 20 кг прокламаций. Приведем выдержки из отчета экипажа: «...у селений, что вдоль реки Бобровая Потудань, расположена кавалерия на привале 5 группами до 1500 коней всего и две батареи: одна в три, другая в пять орудий. „...“ От села Солдатское к Ст. Осколу двигалась колонна кавалерии около 150 коней и 50 повозок. От Петровское к Ст. Осколу шел обоз в 30-40 повозок. От Ст. Оскола на N и NW по проселкам много войск и обозов. „...“ В кавалерию, что по реке Бобровая Потудань, выброшено 18 бомб весом 9 п., выпущено по ним 7 обойм и сброшена литература 1/2 пуда. Задание выполнено».