29 июля 1902 года губернатор Оболенский с женой посетил харьковский драматический театр. Около десяти часов вечера, после окончания спектакля, Оболенские среди многочисленной публики прогуливались в городском саду. К губернатору быстрыми шагами подошел Качура и дважды выстрелил в него из браунинга. Он боялся попасть в шедшую с князем под руку даму и только контузил губернатора. Он попытался выстрелить еще раз, но его за руку схватила и отвела ее вниз губернаторша, и тут же на столяра налетела охрана во главе с полицмейстером, которого Качура ранил. Качура назвал себя членом Боевой организации Партии социалистов-революционеров и в его кармане охранники нашли ее приговор губернатору. Эсеры выпустили прокламации и даже брошюру «Почему стреляли в харьковского губернатора». Кочуру эсеры назвали «народным героем». Его перевезли в Петербург и в Шлиссельбурге он выдал охранникам все, что знал об эсерах. В Киеве и Харькове прошли аресты тех, кто не перешел на нелегальное положение.
В январе 1903 года в Киеве охранники Александра Спиридовича, бывшего офицера Зубатова, со второго раза смогли арестовать помощника Гершуни двадцатипятилетнего Михаила Мельникова. Мещанин из Селенгинска, Мельников поступил в петербургский горный институт, был из него отчислен министрами Боголеповым и Сипягиным, был отдан под надзор полиции, тут же вступил в партию эсеров и перешел на нелегальное положение. За арест Мельникова Киевское охранное отделение Спиридовича было поощрено наградами и премиями. Сам начальник отделения Спиридович писал, что Гершуни был осторожен до крайности, хотя и сам, как умелый аптекарь, отравлял пули из браунинга стрихнином. Гершуни, он же «Федор Петрович», «Брентов», «Кауфман» имел несколько паспортов и казался неуловимым. Зубатов еще в Москве ввел обязательное фотографирование и дактилоскопирование задержанных и фото руководителя Боевой Организации были разосланы по всем охранным отделениям, жандармским управлениям, пограничным пунктам. За его арест была объявлена премия в пятнадцать тысяч рублей, и это были очень большие деньги, которые в итоге сыграли свою, как всегда, мощную роль. По всей империи задерживали и с трудом отпускали похожих на Гершуни людей. Зубатову удалось арестовать одну из членов Боевой организации Людмилу Ременникову с товарищами, но она никого не выдала и на суде, как писали эсеровские листовки «держалась стойко и мужественно». В конце марта 1903 года империю потрясла Златоустовская бойня, виновной в которой был очередной безнаказанный губернатор.