Édifiée à proximité de la commune, l'église Sainte-Madeleine de Caubeyres est aujourd'hui en ruines. Ses vestiges constituent toutefois un formidable témoignage de l'architecture romane. Elle date du XIIe siècle et on peut encore admirer à l'intérieur du bâtiment, l'abside en cul-de-four, les chapiteaux sculptés, ainsi que le bénitier. L'élévation occidentale, qui est bien conservée par rapport au reste de l'édifice, est un clocher-pignon à arcades.