В 1857–1872 гг. усадьбой Рождествено владела семейная чета – штабс-капитан Н.Н. Манухин и его жена Ю.Д. Манухина, а в 1872–1895 гг. – рижский купец К.Я. Буш.
В 1895 г. хозяином усадьбы стал богатый золотопромышленник И.В. Рукавишников, который благоустроил и реконструировал ее. Был расчищен парк, в нем построены новые беседки, павильоны, оранжереи, разбиты цветники. В 1901 г., после смерти И.В. Рукавишникова, владельцем усадьбы стал его сын дипломат Василий Иванович Рукавишников, занимавший пост посланника в Италии, не имевший своих детей. В.И. Рукавишников почти все время работал и жил за границей, в Рождествено бывал редко. Его сестра Е.И. Набокова (урожденная Рукавишникова), ее муж В.Д. Набоков и их пятеро детей приезжали к В.И. Рукавишникову в гости в Рождествено. Детские и юношеские годы племянника В.И. Рукавишникова – Володи Набокова (будущего писателя) во многом связаны с Рождествено. В.И. Рукавишников усадьбу Рождествено завещал племяннику В.В. Набокову. У 16-летнего Володи Набокова первая любовь была именно в Рождествено; в отсутствие хозяина, его дяди В.И. Рукавишникова, Володя тайно встречался на балконе господского дома с 16-летней Валей Шульгиной (которую считают прототипом Лолиты в его романе «Лолита»). Взрослый В.В. Набоков говорил и писал, что в Рождествено в 1915 г. прошли счастливейшие часы его жизни. В.И. Рукавишников умер в 1916 г., В.В. Набоков в возрасте 17 лет стал владельцем Рождествено, но официально вступить в право наследования, распоряжения усадьбой он не успел из-за переворота 1917 г. Семья Набоковых эмигрировала (1919) из России. В.В. Набоков со временем стал известным русским и американским писателем, поэтом, драматургом, переводчиком, автором многих книг, в том числе романа «Лолита» (1955). Набоков с 1940 г. жил в США, писал свои произведения на русском и (с 1940 г.) английском языках.