С назначением Шварца количество проводимых даже в воскресные и праздничные дни учений, где так своеобразно выражалась фрунтомания нового командира, значительно увеличилось. Проявляя болезненную заботу о внешности подчиненных, он приказывал увязывать солдат в ремни для выправки талий, заставлял их тратить скудное жалованье на бесконечное беление амуниции и на фабру для усов. Не имеющие же собственных усов обязывались наклеивать искусственные, отчего на лице появлялись болячки.
Недовольный учениями и непослушанием нижних чинов, Шварц стал усиленно внедрять телесные наказания, заставляя шеренги солдат бить друг друга по щекам и плевать в лицо, поколачивал их своеручно и дергал за губы тех, у кого усы за неимением натуральных были наклеены несимметрично. Кроме того, как вспоминал М. И. Муравьев-Апостол, он поочередно требовал к себе по десять человек и учил их, для своего развлечения, разнообразными истязаниями: «их заставляли неподвижно стоять по целым часам, ноги связывали в губки, кололи вилками и пр. Кроме физических страданий и изнурения, он разорял их, не отпуская на работы. Между тем беспрестанная чистка стоила солдату денег, это отозвалось на их пище, и все в совокупности породило болезни и смертность. К довершению всего, Шварц стал переводить красивых солдат, без всяких других заслуг, в гренадерские роты, а заслуженных старых гренадер без всякой вины перемещать в другие и тем лишать их не только денег, но и заслуженных почестей».
Жизнь рядовых в Семеновском полку, среди которых учащались побеги, становилась все тяжелее. Как писал флигель-адъютант Д. П. Бутурлин к начальнику главного штаба П. M. Волконскому, «Шварц в солдатах возбудил бóльшую ненависть, нежели жесточайший мучитель». Терпели оскорбления и офицеры, называвшие своего полкового командира «алчным зверем в человеческой гордой и благородной коже».
Когда 16 октября 1820 года во время очередного учения один из рядовых встал в строй, не успев застегнуть пуговицы, Шварц плюнул ему в глаза, затем вывел из строя и приказал другим рядовым делать то же самое. В этот день получили телесное наказание награжденный Георгиевским крестом сержант и несколько нижних чинов.
Вечером того же дня солдаты первой роты первого батальона вызвали своего начальника, капитана Н. И. Кашкарова, и заявили ему, что не могут более переносить издевательств Шварца и хотят от имени всего полка довести до высшего начальства просьбу о новом командире. Кашкаров пытался было уговаривать солдат не поднимать шума, но поскольку те продолжали настаивать на своем, обещал исполнить их просьбу.