Сыновья В.А. Всеволожского, любившие беззаботную светскую жизнь, выросшие в богатстве, не приученные к труду и мыслям о дельном использовании семейных средств, не смогли продолжить успешные предпринимательские дела их отца. После смерти В.А. Всеволожского за долги его сыновей все отцовские заводы, солеварни, другие владения поступили в казну. Часть усадебных Рябовских земель продали под дачи. Постепенно из дачных участков и поселков образовался поселок Всеволожский, ставший затем городом. От бывшей шикарной усадьбы Всеволожских мало что осталось: парк на Румболовой горе с остатками усадебного Красного замка (построенного в XVI–XVII вв. шведами, поэтому второе его название – Шведский замок; по другой версии, это дом, построенный в XIX в. для научных занятий и опытов сына Всеволожского – Павла Всеволодовича; в советское время в нем был цех резинотехнических изделий, изготовлявший разные изделия, в том числе клизмы; появилось новое название – Клизменный замок) и храм во имя Спаса Нерукотворного Образа. Эту церковь построили в начале ХХ в. на средства княгини Елены Васильевны Всеволожской (урожденная Кочубей), жены П.В. Всеволожского. Храм был построен по ее воле над склепом ее мужа, участника строительства значимой для этих мест Ириновской железной дороги
(1892 г., построена бароном П. Корфом для перевозок, главным образом грузовых – торфа в первую очередь, и пассажиров; в 1895 г. открыли станцию Всеволожскую, что усилило приток сюда дачников). Е.В. Всеволожская также была похоронена в этом храме, о котором заботился их сын князь Василий Павлович Всеволожский. В советский период храм закрыли, устроили в нем склад, потом клуб, еще позже – станцию по хранению горюче-смазочных материалов. Возрождение храма началось с 1989 г. и главным образом на частные пожертвования построили звонницу, возобновились богослужения. В советский период в Рябовской усадьбе открыли Всеволожский сельскохозяйственный техникум, в лучшие годы в нем одновременно учились более 1000 юношей и девушек.В первой половине XIX в. недалеко от Рябово была усадьба Приютино
, принадлежавшая первому директору Петербургской публичной библиотеки А.И. Оленину. 46 лет (1795–1841) усадьба Приютино принадлежала богатым дворянам Олениным. Они были гостеприимными хозяевами, открыли в усадьбе филиал литературно-художественного салона в их петербургском доме. Многие годы творческие личности с удовольствием и подолгу гостили в усадьбе, вели беседы, посильно творчески работали. В Приютино часто приезжали Г.Р. Державин, А.С. Пушкин (здесь он познакомился с А.П. Керн и А.А. Олениной, которым посвятил несколько своих стихотворений), К.Н. Батюшков, А.С. Грибоедов, Адам Мицкевич, Н.И. Гнедич, П.А. Плетнев, Н.М. Карамзин, И.А. Крылов, М.И. Глинка, А.Н. Верстовский, А.А. Алябьев, А.П. и К.П. Брюлловы, О.А. Кипренский, В.Л. Боровиковский, А.Г. Венецианов, И.П. Мартос, а также А. Гумбольдт. Всеобщей любимицей была младшая дочь Олениных Анна (Аннет), с ней деликатно флиртовали гости-мужчины. А 29-летний А.С. Пушкин в 1828 г. пылко влюбился в 20-летнюю девушку, стал частым гостем в Приютино, просил ее руки, но получил категорический отказ (Оленины знали о его ненадежной репутации, сама Аннет не была в него влюблена, хотя и заигрывала с ним). О жизни и событиях в Приютино рассказывает устроенный в господском двухэтажном кирпичном доме историко-художественный музей, передающий атмосферу дворянской усадьбы первой половины XIX в. По-своему хорош и запущенный парк. Огороженный металлической оградой камень-памятник напоминает о гибели в 1812 г. на Бородинском поле старшего сына Олениных Николая. После смерти жены А.Н. Оленин не смог жить в Приютино, в 1841 г. он продал усадьбу доктору Адамсу; позже владельцы усадьбы менялись. В советский период в главном усадебном доме были жилые квартиры, с 1974 г. работает музей.