Первым архитектором, приступившим к работе на этом месте, на обустройство которого в последующие два столетия будет потрачено столько сил и денег, скорее всего, был некто Иоганн Христиан Фёрстер, голштинец, поступивший на службу к Петру в то же время, что и Маттарнови, Швертфегер, Шедель и Браунштейн. Деятельность Шлютера, по-видимому, связана в Царском Селе с первым дворцом, или, скорее, охотничьим домиком, построенным для Екатерины из дерева, а также с двумя деревянными церквами, одна — в деревне Царское, а другая — в императорском парке. Ученик Шлютера, И.Ф. Браунштейн, заменил Фёрстера: он построил первый кирпичный дом на Саари-Мойс — двухэтажное здание длиной примерно в сто футов и примерно в тридцать восемь футов шириной, с шестью комнатами на каждом этаже. Здание, разработанное и украшенное внутри в голландском стиле, столь любимом Петром, было завершено в 1724 году, за год до его смерти. Тогда же название «Саари-Мойс» было изменено на Благовещенский, после завершения Фёрстером церкви Благовещения, которая была начата еще в 1717 году, а четырьмя годами позже сгорела дотла. В 1725 году, после смерти Петра — и, возможно, в его честь, название было снова изменено, на этот раз простым изменением первого русского названия «Сарское Село» на «Царское Село». Старая форма, «Сарское Село», однако, встречается в официальных документах вплоть до 1808 года.
Браунштейн во время правления Екатерины I построил справа и слева от здания крылья, а также одноэтажный «полукруг», предшествующий стоящему в наши дни очаровательному подковообразному дворцу Растрелли. Здание было окружено садом, разбитым в голландском стиле. Когда Екатерина в 1727 году скончалась, по ее воле Царское Село перешло к ее дочери Елизавете Петровне. Женские традиции этого дворца не прервались. Ни Екатерина I, ни Елизавета не переняли у Петра его военных пристрастий.
Елизавета провела большую часть жизни до начала своего правления в Москве, но она вовсе не игнорировала Царское Село, например, в 1736 году архитектор Земцов произвел небольшие изменения. Но только с восшествием на престол Елизавета получила возможность заняться местностью на холмах к югу от столицы и начать работы, которые превратят Царское Село в серьезного соперника любого европейского дворца. Работы были начаты в 1744 году, и здесь мы встречаемся с новым именем — Квасов. Это был недавно обучавшийся у Земцова молодой русский архитектор, сын Андрея Васильевича Квасова. Именно Квасову было поручено составить планы расширения Царского Села, под направляющими указаниями Джузеппе Трезини, о котором в это время встречаются уже последние упоминания, связанные с Аничковым дворцом.
Когда работа началась, Квасов добавил два крыла ко дворцу, а Каравак разрисовал несколько потолков; другими украшениями занимались Бон и Валериани. Но примерно через год Квасов уступил свой пост другому архитектору, ученику Растрелли Савве Ивановичу Чевакинскому (1713—1783), поскольку его самого отправили на Украину строить еще один дворец для Кирилла Разумовского. Этому Чевакинскому предстояло в 1753 году начать, а девятью годами позже завершить находящийся в самом конце улицы Глинки в Санкт-Петербурге огромный двухэтажный Никольский военно-морской собор, выполненный в стиле барокко и имеющий пять позолоченных куполов. Собор имеет довольно интересную колокольню, стоящую отдельную от собора, у самой воды. Она очень тонкая и немного напоминает колокольню, разработанную Растрелли для Смольного, но никогда не построенную. Но в описываемое время Чевакинскому поручили работать над временным дворцом в Царском Селе. Первые деревянные украшения были созданы в апартаментах императрицы между 1745-м и 1748 годами Огурцовым, который делал несколько рам для зеркал и прочих вещей для прежнего дворца непосредственно перед восшествием Елизаветы на трон. В 1750 году стены были покрыты китайскими тканями, а резные двери поставлены на свои места.
Но эти довольно случайные дополнения Елизавете показались недостаточными — переделанный охотничий домик — не Версаль, где экстравагантная императрица смогла бы проводить балы, праздники и банкеты. И потому в 1752 году было издано распоряжение полностью перестроить дворец. Это поручили Растрелли.