Квартировал Федор в то время у рабочего-металлиста Василия Рыбакова, пожилого степенного человека, всеми уважаемого на заводе. Он-то и свел Федора с передовой группой молодых рабочих. Федор сразу же включился в агитационную работу среди рабочих завода. Он говорил им о стремлении фабрикантов выжимать из рабочих все соки ради увеличения своего капитала, убеждал о необходимости борьбы за свои права. Беседы с рабочими Федор проводил в их квартирах. Он хорошо изучил и знал их быт, нужду и понимал причины ее. Общаясь постоянно с рабочими, Федор снискал их любовь.
В это время он был известен в Одессе под кличкой Федора Бремерского. Администрация завода подсылала к нему провокаторов, шпионов. Его попытались уволить, но из этого ничего не вышло. Он стал уже достаточно известен в рабочей среде, и администрация побоялась «избавиться» от Горбаня.
Период экономического кризиса в России в 1900–1903 гг. тяжело отражался и на рабочих Одессы. Капиталисты снижали заработную плату, увеличивали рабочий день. Появилось много безработных. Рабочие часто бастовали.
После очередного несчастного случая с одним рабочим (со смертельным исходом) Федор и передовые рабочие завода собрали митинг, где он выступил с горячей речью и призывал всех сознательных рабочих к решительным действиям. Постановили объявить забастовку. В разработанных и принятых собранием требованиях были: 8-часовой рабочий день, повышение оплаты труда, установление охраны труда и пр. Но в день объявления забастовки Федор (как один из организаторов ее) и несколько товарищей были арестованы, а забастовка сорвана.
После отбытия 10-месячного наказания в Одесской тюрьме Федор долго скитался без работы и в начале осени 1903 года поступил матросом на пароход. Настроение матросов было боевое, революционное. Федор чувствовал себя прекрасно, не прекращал и здесь подпольной работы: переправлял в Одессу нелегальную литературу из-за границы. Активное участие принял Федор и в первой русской революции 1905 года. Во время восстания матросов на броненосце «Потемкин» он поддерживал связь с восставшими. Часто выступал и на рабочих митингах завода Бремера.
Во время всеобщей политической забастовки Федора, избитого казаками и полицией, арестовали, вывезли в г. Могилев и там бросили в тюрьму. От сильных побоев он пролежал несколько месяцев в тюремной больнице.
Из тюрьмы он вышел через год и три месяца. Постоянную работу в Одессе Федору найти не удалось: он состоял в «черных списках» и, находясь под надзором полиции, не внушал доверия предпринимателям. В связи с этим Федор уехал в г. Харьков, но вскоре и там его арестовали и сослали, как политически неблагонадежного, в Архангельскую губернию сроком на 4 года. Оттуда Федор бежал и снова поселился в г. Одессе. Здесь он мучительно страдал от безработицы и необходимости скрываться от полиции. Федор буквально голодал, и, если бы не выручали товарищи, которые делились с ним своими скудными заработками, ему пришлось бы очень худо. В этот период Федор нередко ночевал под открытым небом, на скамейках бульваров. Однажды после такого ночлега Федор сильно простудился и тяжело заболел. Выходили его мои родители. С этого времени я и подружилась с ним. Мне было всего 16 лет, когда я впервые встретила Федора в нашем доме. Его привела к нам Роза Виркерман, подруга моих сестер, и сказала, что «этого человека надо обогреть, подкормить и, пока он болен, никуда не выпускать».