Узнав, что его план по захвату Риги рухнул, Владимир стал действовать иначе. Он решил взять на себя роль третейского судьи в конфликте между ливами и католиками. Выпроводив Теодориха обратно в Ригу, он отправил вместе с ним и своих людей, которые должны были на месте разобраться в ситуации. Послы прибыли в Кукейнос, откуда отправили приглашение епископу на встречу у реки Воги, куда должны были прийти и старейшины ливов. Однако переговоры закончились ничем, поскольку каждая из сторон осталась при своем мнении.
Обстановка продолжала накаляться, и вскоре последовал взрыв. Центром восстания ливов против католиков стал замок Гольм, который в 1203 году не сумел захватить полоцкий князь. В Риге быстро отреагировали на возникшую угрозу и бросили против повстанцев все наличные силы. В сражении под стенами замка ливы потерпели поражение, многие пали на поле боя или утонули в реке во время бегства. Кому повезло, те сумели укрыться за стенами Гольма. Но крестоносцы не дали ливам ни малейшего шанса на победу. Из Риги прибыли отряды арбалетчиков с метательными машинами, и падение замка стало лишь вопросом времени. После жесточайшей бомбардировки в Гольме были разбиты стены и башни, начались пожары, а защитники понесли большие потери. Восставшие были вынуждены сдаться. Впрочем, заняв Гольм, братья-рыцари не стали там свирепствовать, чтобы окончательно не озлобить местное население, а лишь арестовали всех старейшин. Сначала их отправили в рижскую тюрьму, а затем вывезли в Германию, где, по замыслу епископа, они должны были усвоить местные законы и обычаи.
Альберт прекрасно понимал, что те силы, которыми он располагает в Прибалтике, незначительны. На это указывал и Генрих Латвийский, когда, подводя итоги сражения за Гольм, отметил: «Все славное, что до этого времени произошло в Ливонии, Бог совершил не мужеством многих, а руками немногих» (с. 100). Именно этот факт и оказывал решающее влияние на политику Альберта в отношении ливов. Будучи умным человеком, епископ Риги прекрасно понимал, что без поддержки местного населения шансы германцев удержаться в Ливонии невелики. Поэтому и старался действовать аккуратно. Однако распорядился «занять вышеназванный замок Гольм,чтобы ливы впредь не могли сопротивляться там христианам, зовя на помощь русских и язычников» (Генрих Латвийский, с. 100). Как видим, крестоносцы прекрасно понимали, кто может спутать им все карты в большой прибалтийской игре. Очень точно охарактеризовал политику епископа в Ливонии Н. М. Карамзин: «Но Альберт говорил как Христианин, а действовал как Политик: умножал число воинов, строил крепости, хотел и духовного и мирского господства