Мнения по поводу преимуществ и недостатков этого огромного сооружения очень разнятся. Некоторые критики отзываются о дворце с восхищением, другие же — и среди них Грабарь и Рео — находят в нем недостатки. Зданию определенно недостает легкости, а его пропорции неудобны, поскольку, имея всего около семидесяти футов в высоту, в длину оно протянулось на четыреста пятьдесят футов. Расположенный внизу по стене ряд ионических колонн поднимается с фундамента, зрительно несколько увеличивая высоту здания. Верхний ряд коринфских колонн поднимается на два этажа в высоту. С точки зрения большинства критиков украшений здесь слишком много; создается впечатление, что внутренние украшения дворца распространились на здание и снаружи. «Как в онере», — говорит Рео, который считает ряд колонн слишком частым, а рамы окон тяжеловесно украшенными. Подобные замечания вызывают и ряды стоящих и сидящих фигур, чередующихся с массивными цветочными вазами. Эти фигуры размещены на каждом углу, на парапете и на крыше — здесь они стоят словно гигантские кегли.
Из XVIII века до нас доносится негодующий голос Урэксхолла. «Он слишком большой, — говорит он о Зимнем дворце. — И очень сухой. Такое впечатление, что для планирования этого здания призвали Джона Ванбру, настолько разительно сходство с его стилем. Здание не завершено, как и почти все в России». Здесь он прав — из соображений экономии цари более позднего времени лишили дворец того, что придавало ему легкость. Цвет здесь играет большую роль в общем замысле, чем в других работах Растрелли. Но на протяжении примерно столетия несчастный дворец сверху донизу покрывала однообразная монотонная темно-красная краска, что придавало зданию тяжеловесный вид. А поначалу оно было бирюзово-голубым (или, по мнению других специалистов, оранжевым); у него были белые колонны и белые дверные рамы, а также серебристый орнамент, созданный самим Растрелли.
О внутреннем убранстве мы можем сказать немного, поскольку пожар 1837 года уничтожил большую часть созданных при Елизавете украшений, над которыми работали такие художники, как Ле Принс, отец и сын Градизи и Фонтебассо. Из того, что избежало огня — превосходная Иорданская лестница, по которой царь обычно спускался, чтобы присутствовать на водном крещении в ледяной проруби на Неве, освященная в 1761 году дворцовая церковь и галерея, резные украшения для которой выполнил Дункер. Все это несет в своем характере что-то елизаветинское.
Проходя мимо, трудно не отметить, что дворец всецело принял на себя роль главной части города. Описывая сооружения, воздвигнутые после Петра I, мы почти не имели возможности рассказать о зданиях, которые не находились на Адмиралтейском острове или восточнее его — и даже о самом Адмиралтействе и о столь отдаленном сооружении, как Смольный монастырь. К примеру, на Васильевском острове, где поначалу столь энергично начали воздвигать дома, строительство почти замерло. Кроме ряда добрых строений на набережной и еще одной улице, весь этот район все еще состоял из деревянных домов, построенных примерно на одинаковом расстоянии друг от друга, на улицах, пересекающихся под прямым углом. Планировка весьма напоминала американскую, причем еще и тем, что улицы, идущие с севера на юг — их называют «линии», — имели не названия, а номера; эта система сохранилась до сих пор.