Являвшийся архитектором Вальтер Франциус смог наладить сотрудничество с сельскими жителями и воодушевленными юношами из состава Имперской трудовой службы. Именно благодаря этому сотрудничеству в Вевельсбурге был создан так называемый «общинный крестьянский дом». Еще в октябре 1935 года Гиммлер по просьбе Франциуса приобрел полуразрушенное здание, которое располагалось в центре деревни и было известно под названием «двор Оттена». Крестьянин Тиле, который владел этим зданием, с удовольствием продал его рейхсфюреру СС. Теперь фактически закрытый для посещения замок Вевельсбург приобрел в деревне еще один культурный центр, посредством которого можно было осуществлять работу по идеологической обработке крестьян.
Восстановление 300-летнего фахверкового здания и столь же старого фахверкового амбара, который примыкал к нему, можно было признать весьма удачным архитектурным решением. Можно было бы даже говорить об удачном стилистическом решении данной задачи, если бы оба здания в изобилии не были украшены национал-социалистической, «нордической» и «древнегерманской» символикой. Она встречалась фактически повсюду. Восстановление зданий шло в течение полутора лет — с ноября 1935 года по май 1937 года. Показательно, что это был проект, в котором принимали участие только добровольцы. По мнению Франциуса, это должно было привить местным жителям национал-социалистическую общинную идеологию. Данная акция не была лишена и антисемитских посылов. Многочисленные плакаты и транспаранты, вывешенные близ замка и на въезде в деревню, провозглашали, что «евреи были исключены из общинной жизни».
Однако добровольного труда не всегда было достаточно для того, чтобы восстановить дом. По этой причине Франциус постоянно выдумывал все новые и новые поводы, чтобы получить денежные и материальные пожертвования от органов власти, а также от некоторых частных лиц, которые покровительствовали данному проекту.
Одним из искусных ходов, который был сделан Франциусом, стало создание в начале 1937 года просторного «свадебного зала», который располагался в мансарде дома. После этого он запланировал создание «вестфальского гербового зала», после чего запросил у властей Вестфалии, равно и окрестных городов некую сумму. Деньги должны были пойти на изготовление деревянных стульев, украшенных резными гербами. Стоимость каждого из такого стульев была оценена в весьма немалую сумму — 43 рейхсмарки. Все усилия не были напрасными. 8 мая 1937 года Гиммлер прибыл в Вевельсбург, чтобы в торжественной обстановке открыть «общинный дом». По выражению рейхсфюрера СС, он (дом) должен был стать «центром мирных отношений, средоточием жизни деревни и замка».
Однако провозглашенные Генрихом Гиммлером «мирные отношения» постоянно нарушались, что нередко приводило к конфликтным ситуациям между жителями деревни и эсэсовцами. Первый конфликт возник, когда на Рождество 1936 года был разрушен крест, установленный близ дороги, ведущей в Вевельсбург. Следствие показало, что акт вандализма совершили двое из руководителей располагавшегося поблизости лагеря Имперской трудовой службы. Однако итоги расследования не слишком впечатлили местных жителей, так как виновников разрушения креста всего лишь перевели на новое место. Напряженность в отношениях между крестьянами и эсэсовцами возросла в том числе благодаря действиям оберштурмфюрера СС Деммеля. Тот во время празднования Дня национального труда сломал челюсть местному жителю, столяру Йозефу Хюбелю. Когда тот упал, эсэсовец его в довершение пнул ногой. Травма оказалась настолько серьезной, что Хюбелю потребовалось многомесячное пребывание в больнице. После этого напряжение в отношениях между деревней и замком почти никогда не спадало.
Во время подготовки традиционного для Вестфалии праздника — Дня стрелка — вновь возник конфликт. Во время празднества, которое проходило 13 июня 1937 года, несколько молодых людей, проживавших в деревне, однозначно высказались, что не потерпят в своем шатре ни одного эсэсовца. Чтобы избежать массовых беспорядков, в Вевельсбург на время празднования пришлось прислать дополнительные силы полиции и жандармерии (на самом деле всего лишь пару человек).