Ни одно здание так не пленяло и не очаровывало русское общество, не вызывало такого количества подражаний, как Таврический дворец. Влияние его на русскую архитектуру, особенно на усадебное строительство того времени, поистине колоссально. Таврический дворец стал своего рода эталоном русской дворянской усадьбы, прототипом бесчисленных «домиков с колоннами», которые были разбросаны по всей необъятной России. Так дворец, построенный как символ любви, стал образцом для подражания при строительстве «дворянских гнёзд», имений русских помещиков.
В 1782 году в Санкт-Петербург прибыл генерал-губернатор Новороссийской, Азовской и Астраханской губерний светлейший князь Григорий Александрович Потёмкин. К тому времени, являясь тайным мужем Екатерины II, он фактически стал вторым человеком в Российской империи. Во время пребывания в Санкт-Петербурге он останавливался в Зимнем дворце, что в конце концов посчитал для себя неудобным. И вот Потёмкин принял решение строить для себя в столице собственный дворец.
Для строительства был выбран участок на берегу Невы, в слободе родного Потёмкину Конногвардейского полка. Именно в этом полку он когда-то начинал свою военную карьеру, участвовал в дворцовом перевороте, в результате которого Екатерина II взошла на престол. Поэтому-то изначально дворец стал называться Конногвардейским домом.
Архитектором дворца стал Иван Егорьевич Старов, знакомый Потёмкина по учёбе в гимназии при Московском университете.
Строительство было начато в 1783 году. На южной стороне Шпалерной улицы был построен не просто дворец, а загородная усадьба – здание с парком.
Проектируя Таврический дворец и близлежащую территорию, Старов планировал создание грандиозной системы дворцово-парковых ансамблей, ориентированных на Неву. На строительство и отделку дворца была затрачена по тем временам гигантская сумма – около 400 тысяч рублей золотом.
Таврическому дворцу была уготована центральная роль в этой системе ансамблей. Фасад дворца акцентирован шестиколонным дорическим портиком, над которым возвышается купол на стройном барабане. Здание имеет П-образную форму.
Дворец имеет сравнительно небольшую высоту (всего 12 метров). Несмотря на это, Таврический дворец является одним из эталонов русского классицизма, заключая в себе тонкий расчёт, удивительную соразмерность, совершенство пропорций и душевную теплоту. Великолепная отделка интерьеров резко контрастирует со строгим и монументальным обликом дворца.
Князь Потёмкин владел дворцом немногим более года, а жил здесь и того меньше. Служба требовала его постоянного пребывания на юге России. Находясь в Санкт-Петербурге, Потёмкин устраивал здесь пышные приёмы или был в одиночестве.
В 1790 году он продал дворец в казну и уехал на юг. Однако после взятия русскими войсками турецкой крепости Измаил дворец вновь перешёл князю. Он был подарен ему Екатериной II за заслуги в участии в этой военной кампании.
28 апреля 1791 года здесь состоялся торжественный пир по случаю взятия Измаила. Для этого во всём городе был скуплен свечной воск. Его не хватило, пришлось закупать воск и в Москве. На торжестве присутствовал практически весь цвет Санкт-Петербурга – три тысячи человек. Не забыли и простой народ – у входа во дворец поставили бочки с вином и столы с закуской.
Григорий Александрович Потёмкин скоропостижно скончался 5 октября 1791 года. Екатерина II выкупила дворец у его наследников.
Екатерина II Алексеевна делает дворец своей осенней резиденцией. Так наряду с Летним, Зимним и Весенним (Мраморным) дворцами в Петербурге появляется Осенний дворец. Осень стала знаковым временем года для дворца и его обитателей. Осенью 1896 года скончалась Екатерина II. Осенью к власти приходит её сын Павел I и размещает во дворце Конногвардейский полк.
Дворец Павел приказал называть замком. Ценности из здания были вывезены. Так, наборные паркеты были использованы при строительстве Михайловского замка. В зимнем саду была устроена конюшня, в Екатерининском и Купольном залах – манеж, в других помещениях – казармы.
В 1802 году Александр I пожелал реставрировать здание. Эти работы были поручены Луиджи Руска. Из зимнего сада исчезла ротонда, при использовании новых строительных технологий стало возможным перекрыть большое пространство без дополнительных опор. С 1819 года восстановлением интерьеров дворца руководил Карл Иванович Росси.
В 1890-х годах центральной частью здания заведовала Дирекция императорских театров. С 1898 года здание использовали как выставочный зал.
В 1906 году Николай II отдал дворец для работы I Государственной Думы.