Несмотря на разговоры о непристойных дивертисментах и оргиях в Архангельском, Юсупова продолжали воспринимать как милого оригинала, не сумевшего откреститься от замашек своих предков, восточных владык. Те же, разумеется, имели гаремы и прекрасных невольниц со всех концов земли. С явной симпатией описывает неверного мужа Татьяны Васильевны московская барыня Е.П.Янькова:
«Князь Николай Борисович Юсупов был один из самых известных вельмож, когда-либо живших в Москве, один из последних старожилов екатерининского двора и вельможа в полном смысле... Так как Юсупов был восточного происхождения, то и не мудрено, что он был великий женолюбец: у него в деревенском его доме была одна комната, где находилось, говорят, собрание трехсот портретов всех тех красавиц, благорасположением которых он пользовался».
То, что со стороны казалось легко объяснимым, для бедной жены сделалось источником непрекращающихся мук. Татьяна Васильевна перестала бывать в свете, ибо постоянно ловила на себе внимательные взгляды. Брошенной жене, конечно же, сочувствуют, но при всем том подозревают в ней какой-то тайный изъян, понудивший супруга искать иных удовольствий.
Княгиня Юсупова замкнулась. Она даже не захотела жить в роскошном дворце Архангельского и выстроила себе небольшой дом в парке. Ее жизнь сосредоточилась на детях от первого брака и сыне Борисе, рожденном от Николая Борисовича.
Правда, княгиня не отказывала себе в удовольствии общаться с теми немногими людьми, чьи таланты ценила чрезвычайно высоко. В этом узком кругу бывали Державин, Крылов, Жуковский, Пушкин, очарованный романтической атмосферой Архангельского.
Державин, глубоко уважая Юсупову и сочувствуя ее переживаниям, посвятил ей стихотворение «К матери, которая сама воспитывает детей своих». Слово «сама» особо подчеркнуто: в те времена чад в богатых семействах воспитывали гувернантки и гувернеры. Обычно родовитые отпрыски лишь прикладывались к родительской ручке с пожеланиями «доброго утра» и «доброй ночи». На том общение с батюшкой и матушкой заканчивалось.
Но дети подрастали, все меньше нуждались в матери, и Татьяна Васильевна пыталась восполнить душевное одиночество заботами о других людях.
Суммы, которые Татьяна Васильевна отдавала нуждающимся, были по тем временам громадные. М.И.Пыляев в книге «Замечательные чудаки и оригиналы», уделив несколько страниц княгине Юсуповой, писал, что ее пожертвования порой составляли «двадцать и более тысяч».
Имя Татьяны Васильевны связано с одним происшествием, которое наделало много шума в Петербурге. Оно послужило сюжетом для пьесы и стало известно даже во Франции.