L'église Saint-Martin fut construite en 1843 sur l'emplacement de l'ancienne chapelle dédiée à Sainte Madeleine, qui servait de culte aux habitants d'Ambresin.
L'ancienne chapelle était bâtie en pierre calcaire et silex, dans un style gothique. Elle était en forme de croix, le chœur vers le levant et la porte d'entrée vers le couchant. Elle était très petite et menaçait déjà de s'écrouler en 1780. A cette époque, l'église fut incendiée et on resta longtemps sans la réparer. Et lorsque le 11 juillet 1840, la foudre tomba sur le clocher, on s'arrangea pour amplifier les dégâts et la démolition commença le 29 juin 1842.