Граф Петр Борисович Шереметев (1713–1788) прожил длинную жизнь, частью в Москве, частью в Петербурге. Он достиг высокого положения в обществе: получил генеральский чин (хотя в военных кампаниях и не участвовал), придворное звание обер-камергера Двора, кавалер ордена Св. Андрея Первозванного; Екатерина II назначила его сенатором.
Граф П. Б. Шереметев считался одним из богатейших людей России. Усадьба на Фонтанке изначально не была самой старой или самой значимой из его имений. Однако его видное положение в обществе и женитьба в 1743 г. на княжне Варваре Алексеевне Черкасской стали причиной того, что он превратил Фонтанный дом в свою главную столичную резиденцию.
На годы царствования императрицы Елизаветы Петровны пришелся первый юбилей Петербурга — его 50-летие. К середине XVIII столетия новая столица уже приобрела достойный облик: перестраивались старые и возводились новые императорские резиденции, роскошные усадьбы создавали и первые вельможи государства. На берегах Фонтанки возникли Летний дворец самой Елизаветы Петровны (на его месте позже будет построен Михайловский замок), Аничкова усадьба графа Разумовского, усадьбы графа М. И. Воронцова, графа Г. И. Чернышева, князя Б. Г. Юсупова. Свое место в этом дворцово-парковом ожерелье заняла усадьба графа Петра Борисовича Шереметева. Именно хозяин и дал то название усадьбе, которое сохраняется и поныне — Фонтанный дом, по месту ее расположения. В повелениях служителям он нередко писал: «В Фонтанном моем доме…»
Граф П. Б. Шереметев
Постройкой главного усадебного дома занимались преимущественно крепостные люди графа Петра Борисовича. Основная ответственность за ход работ была возложена на Федора Аргунова, одного из членов замечательной династии крепостных архитекторов и художников