Villers-Perwin a été habité par de nombreux seigneurs tout au long du Moyen-Âge. Le château tel qu’on le voit aujourd’hui a été bâti en 1760 par la famille de Renette-Misson. Les armoiries de la famille figurent au-dessus de l’entrée du château.
Quelques années plus tard, c’est la famille des Dumont de Chassart qui rachète le Château. Cette riche famille possède des usines qui produisent du sucre et de l’alcool. Presque tous les habitants de Villers-Perwin travaillent alors pour eux !