Жили Сахаровы все годы в центре Москвы, в ее Тверской и Арбатской части, сменив между 1886 и 1910 годами десять квартир, когда, наконец, обосновались в Гранатном переулке, д. 3, занимая квартиру из 6-ти комнат — 2-й этаж небольшого особняка. Дом принадлежал Моисею Соломоновичу Гольденвейзеру, юрисконсульту банка Полякова, знакомому Ивана Николаевича Сахарова по московской адвокатуре. Но с Александром Борисовичем Гольденвейзером семья Сахаровых познакомилась позже, когда Дмитрий Иванович стал женихом Екатерины Алексеевны Софиано.
После революции квартира в Гранатном стала коммунальной. В годы детства и юности Андрея Сахарова в ней жили и вели раздельное хозяйство шесть семей: сама Мария Петровна, семьи трех ее сыновей и две посторонние семьи. В 1941 году во время первых немецких бомбежек Москвы в дом попала бомба и всех жильцов расселили в другие дома. Родители Андрея Дмитриевича получили комнату в коммунальной квартире на Спиридоньевской улице. После войны дом в Гранатном был восстановлен, и в настоящее время в нем находится отделение милиции…
<…> Для читателя может показаться необъяснимым, почему об одних людях я пишу очень подробно, а других только упоминаю. Эта непропорциональность — следствие того, что о людях, попавших в зону внимания полицейских органов как в Российской империи, так и в СССР, сохранилось множество архивных документов, и они раскрывают не только обстоятельства следствия или надзора, но в значительной мере личность человека…
Отец Андрея Сахарова, Дмитрий Иванович, окончил гимназию в 1907 году и поступил на медицинский факультет Московского университета, но в мае 1908 года подал прошение о переводе на естественное отделение физико-математического факультета по специальности «физико-химия», где и продолжил образование. В марте 1911 года он был исключен из университета за участие в студенческих сходках, но, видимо, «участие» не было значительным, т. к. в мае был восстановлен. Он окончил университет весной 1912 года и начал учительскую деятельность. Однако, ощутив недостаточность педагогической подготовки, поступил в Педагогический институт им. Павла Григорьевича Шелапутина (частное учебное заведение, основанное на средства Шелапутина специально для подготовки к педагогической деятельности выпускников университетов) и через два года закончил его.