Двадцать лет владения Моллерами домом на Никитском бульваре заставляют москвичей забыть имя первой его хозяйки, появляется расхожее понятие «дом Моллеров», который в 1858 году переходит к графине Комаровской, урожденной Галан, правнучке Алексея и Кирилы Разумовских. Комаровские были семьей, пользовавшейся неизменной благосклонностью императоров. Начало этому отношению было положено еще во времена Екатерины II, когда сын чиновника Дворцовой канцелярии, выпускник известного в Петербурге пансиона Масона, Евграф Федотович Комаровский был назначен к графу Безбородко чиновником для заграничных поручений. Он участвовал в таврическом путешествии императрицы и получил поручение привезти из-за границы портрет будущей императрицы Елизаветы Алексеевны, супруги Александра I, который всю жизнь благодетельствовал Комаровскому. С 1794 года он начал службу в Измайловском полку, оставил любопытный «Журнал военных действий российско-австрийских войск в Италии», участвовал в Отечественной войне 1812 года и в подавлении выступления на Сенатской площади. Графиня М. П. Комаровская-Галаган в 1876 году завещает дом на Никитском бульваре своей дочери Екатерине, по мужу графине Ламздорф (1846–1916).
Комаровские в том же году избавляются от московской собственности. Граф Константин Ламздорф с 1865 года состоял флигель-адъютантом императора и именно в 1876 году был назначен командиром гвардейского конного гренадерского полка, а с марта 1877 года сопровождал кронпринца Вильгельма в его поездке по России. Супруги зимой постоянно жили в Петербурге, а летом в своих колоссальных поместьях на Полтавщине.
Но действительно примечательной была фигура покупателя дома. После всех живших здесь аристократических семей на бульваре появляется купец всего-навсего 2-й гильдии А. Н. Прибылов, живший «собственным домом в Рогожской слободе» и так и не сменивший места жительства. Зато он деятельно принимается за переделку всего домовладения, причем достаточно необычным способом. Прибылов приглашает для этой цели еще никому не известного Александра Фелициановича Мейснера, который закончил в 1883 году Московское училище живописи, ваяния и зодчества по отделению архитектуры с Большой серебряной медалью. Начать профессиональную работу Мейснеру удается только в качестве помощника других архитекторов. Так, до 1887 года он остается помощником А. П. Попова на строительстве Исторического музея в Москве, последующие четыре года – К. М. Быковского, преимущественно на строительстве университетского комплекса зданий.
Прибылов поручает Мейснеру перестройку сначала флигеля – нынешнего Дома журналиста, который должен превратиться в дорогой особняк, и только спустя двенадцать лет – основного голицынского дома. При этом архитектор все время пользуется квартирой в доме Прибылова, которую использует и как собственную мастерскую. В 1889 году голицынский дворец приобретает современную декоративную обработку фасада и общую надстройку четвертого этажа. Прибыловский дом начинают называть «профессорским», поскольку его выбирают для жизни профессора Московского университета и артисты императорской казенной сцены. Здесь живет на протяжении почти десяти лет Антонина Васильевна Нежданова, снимает квартиру главный режиссер Большого театра Василий Петрович Шкафер, перешедший на казенную сцену из Частной русской оперы С. И. Мамонтова. Это о нем Ф. И. Шаляпин отзывался как «об одном из артистов наиболее интеллигентных и понимавших важность задачи». Речь шла о постановке «Бориса Годунова», где Шкафер исполнял роль Шуйского. Василий Петрович был очень удачным партнером Шаляпина и по «Моцарту и Сальери», где пел партию Моцарта.
Переделки домовладения А. Н. Прибылова совпадают со значительными изменениями в характере заказов архитектора. В 1893 году он становится участковым архитектором, в 1897-м – членом Строительного совета управы. Среди многочисленных доходных домов, которые начинает проектировать А. Ф. Мейснер, особняком стояла перестройка им популярной московской церкви в Брюсовском переулке – Воскресения на Успенском Вражке (1897). За это время архитектор приобретает и собственный дом в Ремизовском переулке (№ 3).
У Прибылова же Мейснер жил во вспомогательном здании, выходившем на Калашный переулок. Его квартиру после Октябрьского переворота занял известный историк Москвы Петр Васильевич Сытин. В ней же кончила свои дни и его вдова.