Что значит родиться художником под властью деспотизма, в этом он мог убедиться по собственному опыту. Его хлопоты об отце остались безуспешными. Денежная зависимость давала повод «благодетелям» напоминать ему о праве на его вдохновение. Печальный опыт жизни постоянно наводил художника на размышления об источниках его злоключений Правда, чрезмерно распространяться на эту тему в письмах было небезопасно. В официальных письмах он вынужден именовать академик, «храмом художеств», но отцу признавался, что академия отжила свой век, как «вещь предшествующего столетия». В. И. Григоровичу он писал: «Вы поставлены общим отцом нашим», но после всех притеснений и наставлений конференц-секретаря жаловался приятелю: «Какая скука возиться с этим педантом!» Иванов сознавал, как гибелен для искусства тот факт, что художники погрязли в «светские угодности и интриги», и он возмущался тем, что русский художник вынужден стать «совершенным купцом и бессовестным спекулятором». С ужасом он опасался, как бы необходимость ради заработка выполнять «дюжинные иконостасы и портреты» не превратила и его самого в «купца». Но Иванов не ограничивается жалобами на произвол и бесчинства отдельных людей «сильных мира сего». Он восстает против зависимости художника от высших классов и прежде всего от монарха. «Мы должны сознаться, что не имеем еще народного расположения, и потому все еще выспрашиваем у государя денег на свое содержание». И он с горечью отмечает, что «вельможи русские не удостаивают своим посещением русского художника».
В своих письмах и заметках Иванов то и дело с возмущением вспоминает об унизительном рабстве, о рабском покорстве и о вынужденном усердии раба. Хотя художник не мог еще осознавать всех причин создавшегося положения вещей, он был в те годы едва ли не единственным среди римских пенсионеров, который задумывался над этими вопросами. Большинство остальных думало только о том, чтобы приспособиться к существующим условиям и извлечь из них пользу.
Осуждая то положение вещей, которое господствовало в Петербурге, Иванов ни на минуту не переставал сознавать себя русским. Даже ссоры его с соотечественниками не могли поколебать в нем этого сознания. Находясь в качестве пенсионера в прямой зависимости от пользовавшихся авторитетом у русского правительства художников-иностранцев и прибегая в случае нужды к их поддержке, он и сам призывает «прислушиваться к приговорам других наций, гораздо нас просвещеннейших». Однако по мере того как он замечает, что многие иностранцы занимают в России наиболее почетные места и вытесняют с них презираемых ими русских людей, в нем растет возмущение против этого унизительного положения.