Het kasteel van l’Estriverie werd voor het eerst vernoemd op het einde van de 13e eeuw als 'huis' dat toebehoorde aan Jean d’Audenaerde. Het bevond zich in de heerlijkheid van de familie de Lestriverie, de heerlijkheid die haar naam gaf aan het huidige kasteel. In de 15e eeuw werd het beschreven als een huis met een toren omringd door een walgracht. In de 13e eeuw lag op deze plek een motteburcht. Hij werd verbouwd en vergroot in de 16e of 17e eeuw en werd een traditioneel kasteel, met bijgebouwen in L-vorm.
Het kasteel is gebouwd in baksteen, kalksteen en zandsteen, met twee niveaus. Het heeft een zadeldak in leisteen, ondersteund door een fries met kraagstenen. De gevels hebben een onderbouw in breuksteen of met kalkbepleistering. De ingang toont het jaar 1630 en het wapenschild van de familie Cottrel, de eigenaars van het kasteel in de 16e en 17e eeuw.
Het als monument geklasseerde kasteel van l’Estriverie heeft zijn verhevenheid en erfgoedwaarde volledig behouden. Het voorplein, de grachten, de torens en het dak vormen nog steeds een baken in het landschap.
Geklasseerd op 7-07-1976