Сегодня трудно себе представить, что именно к этому дому с колонным портиком почти на вылете Знаменки на Арбатскую площадь были обращены слова великого зодчего В. И. Баженова: «Прекрасны еще в Москве дома… на Знаменке графа Воронцова». Слишком много перестроек пережило здание, а теперь еще лишилось и великолепного липового сада, затенявшего, но и украшавшего его фасад.
История дошедшего до нас, как его называли когда-то, воронцовского дворца уходит ко временам правления императрицы Елизаветы Петровны. Двухэтажный, на белокаменных подвалах, он по чертежам 1750 года числился главным домом огромной усадьбы П. М. Апраксина. В июле 1761-го «граф Федор Алексеев сын Апраксин продал свой двор в Белом городе, на Знаменской улице, в приходе церкви Знамения Богородицы на белой земле» графу Роману Илларионовичу Воронцову, отцу княгини Екатерины Романовны Дашковой, президента Российской Академии наук. Почти сразу новый владелец приступил к строительству нового дворца с использованием частей старого, причем в первоначальном виде основное здание имело боковые флигеля. Существует предположение, что имелся и проезд во внутренний двор, а со стороны Крестовоздвиженского переулка – пристройка в виде большой театральной залы. Именно этот «Знаменский оперный дом» и положил начало Арбату как Театральной площади.
Москва испытывала острую потребность в театральных зрелищах. Временные антрепризы не решали дела, и в 1769 году антрепренеры Бельмонти и Чинти (иначе – Чути) получили право на постановку «публичных маскерадов, комедиев и опер комических» с условием соорудить для этого специальное здание «между Мясницкими и Покровскими воротами, где была стена Белого города и лесной ряд», то есть на месте Чистых прудов. Выбор места ввиду его крайней заболоченности оказался неудачным, приходилось подыскивать другое. Пока же, «чтобы актеры без платы, а общество без удовольствия не остались», компаньоны добились разрешения давать представления при воронцовском доме. Именно «при», потому что небольшое помещение представляло собой «три деревянных стены, прирубленные к каменной». Отделка зала очень не нравилась москвичам. По их отзывам, «непрочное строение оного, без всякого порядка и украшения внутри, без всякой удобности и важности, приличной публичному зданию снаружи».
Собственно, антрепренеров оказалось несколько. Первыми арендаторами воронцовского помещения выступают князь П. В. Урусов вместе с английским театральным механиком Михаилом Егоровичем, как его станут называть в Москве, Медоксом. Одновременно с ними здесь же подвизаются итальянцы Бельмонти и Чути, которых газетчики определяют как «содержателей русского театра» и «маскарадных представлений». Когда в Москве в 1771 году началась эпидемия чумы, Бельмонти умер. Его права перешли к некоему Мельхиору Гроти, который в 1776 году передал их князю П. В. Урусову. Многочисленные антрепризы слились в одну. Почти сразу, в марте 1776-го, Московская Полицейместерская канцелярия выдает князю привилегию на театральные представления. Кто бы мог отказать московскому губернскому прокурору – должность, которую П. В. Урусов занимал.