И, конечно, одним из самых распространенных видов мошенничества был липовый список рабочих, так называемая «спекуляция на мертвых душах». Бригадир вносил в список своей бригады вымышленных рабочих и получал на них зарплату, которую отправлял в свой карман. К примеру, в списке бригады каменщиков или маляров могло быть 20 фамилий, а на стройке работали только 10 человек. Приходилось делать постоянные переклички и выискивать такие «мертвые души», что было достаточно трудно сделать, так как бригадир с пеной у рта клялся, что вчера такой-то 12 часов работал, а сегодня не вышел, так как ногу повредил.
Иногда, чтобы предотвратить конфликты с рабочими и как результат — потерю времени, Рафаэль был вынужден закрывать глаза на липовые списки рабочих, выплачивая им деньги. Он пришел к этому после нескольких случаев, когда уличенный в обмане бригадир вообще отказывался приводить на работу своих людей, и строительство простаивало, принося колоссальные потери.
Все эти конфликты и разборки очень многим были не по душе. За спиной же недоброжелатели Рафаэля пытались очернить его в глазах папы, ябедничая, что он тратит на строительство слишком много денег.
Впрочем, навредить клеветникам не удавалось. Ведь Рафаэль самым тесным образом был связан со всеми предприятиями, проводимыми папой. Но при этом он еще и выполнял частные заказы богатых клиентов, постоянно занимаясь живописью. После тяжелого дня, проведенного на стройке собора святого Петра, живопись становилась его отдушиной. Но при этом он еще и умудрялся вести бурную светскую жизнь, посещая все приемы в папском дворце. Без него теперь не обходился ни один официальный прием, ни одна богатая светская вечеринка.
Очень часто по вечерам папа Лев X приезжал на строительство своего собора. Сопровождал его всегда Рафаэль. Элегантный, дорогой, а главное, очень чистый костюм папского любимца чудовищно раздражал грязных, перепачканных землей и мелом рабочих в порванных робах. Рабочие начинали роптать за его спиной.
Рафаэля предупреждали о том, что его роскошный вид в бархате и атласе, украшенном золотом и драгоценными каменьями, очень сильно раздражает рабочих на стройке и вызывает у них недовольство. Рабочие не видели в нем мастера и архитектора, не признавали за своего и постепенно очень сильно невзлюбили. Рафаэлю говорили, что он по душе далеко не всем. Но он только посмеивался. И действительно — слишком велика была пропасть между грязными, безродными рабочими, и вторым человеком во всем Риме после самого папы.
На стройке были так плохо настроены к Рафаэлю, что даже его попытки пресечь мошенничество и наказать воровство не находили поддержки и встречались в штыки. Никто не верил в то, что он делает это искренне.