Полнейший упадок местечка и Ружанского замка

После восстания в 1831 году против Российской короны, владения были конфискованы и отданы в аренду, в королевских покоях дворца заработала ткацкая фабрика, что привело к полнейшему упадку значимости Ружан, а Первая мировая война принесла разруху в имение а  Вторая мировая довершила начатое и привела к полнейшему уничтожению великолепного дворцово-паркового ансамбля, созданного Сапегами.

Над остатками былого величия также неплохо потрудилось и местное население, растаскивая по кирпичикам стены Ружанского замка на стройматериал. Их можно понять, время было тяжолое, не до культурного наследия.