Но после нескольких предприятий, лишь часть из которых имела отношение к архитектуре (он строил дворец в Преображенском под Москвой примерно во время смерти Петра), частично занятый осушением и канализацией в Санкт-Петербурге, Еропкин не имел большого веса. Последние годы своей жизни он тихо провел в работе над монастырем Александра Невского. Помимо этого, следует отметить, что после 1721 года с Запада в Россию не прибыло ни одного сколько-нибудь заслуживающего внимания архитектора. Растрелли получил огромное поле деятельности.
Однако, несмотря на столь благоприятное положение, Растрелли первое время никак им не воспользовался, поскольку довольно длительное время отсутствовал в России. Когда он покинул в 1732 году Москву, ему пришлось заниматься строительством не только Санкт-Петербурга, но и в Курляндии, на территории, управлявшейся всесильным Бироном.
Каким-то образом он достиг благосклонности фаворита Анны Иоанновны. Эта связь между Растрелли, который, как никто другой, представлял итало-французский элемент в Петербурге, и Бироном, немцем, чьи усилия были направлены против растущего итало-французского влияния, весьма удивительна. Однако факт остается фактом — единственной действительно ценной работой Растрелли во времена Анны Иоанновны является дворец, построенный им для Бирона в Митаве (в наши дни Елгава в Латвии), местопребывании правительства Курляндии. Сооружение началось в 1737 году; первая часть дворца была закончена в 1740 году. Это обширное сооружение за пределами города, на острове, образованном двумя реками. Дворец совсем не характерен для стиля Растрелли — но сейчас мы не можем сказать, является ли это результатом тогдашней незрелости его таланта или же казарменная монотонность здания была выражением вкусов самого Бирона. То, что «третий» Зимний дворец намного более характерен для стиля Растрелли, заставляет предположить последнее. Растрелли создал еще две резиденции для Бирона в Курляндии — в Рухенхале и в Зиппельборфе. Они появились гораздо раньше, чем дворец в Митаве, и, по всей видимости, одновременно с Зимним дворцом в столице.
В 1739 году Растрелли снова вернулся в Санкт-Петербург, где разработал иллюминацию и винные фонтаны для празднования мира с Турцией. После смерти Анны Иоанновны в 1740 году — после некоторого периода сомнений — последовала ссылка Бирона в Сибирь, но слава Растрелли позволила ему продолжать службу и при новом дворе, несмотря на прежнюю связь с опальным министром. Удивительно, но взлет Растрелли начался в короткое время регентства весьма ленивой и явно не соответствующей своему месту регентши Анны Леопольдовны.