L’église est accessible au public toute l’année. L'église de Celles, remarquablement bien conservée, est considérée comme l’un des plus beaux exemples de l’architecture romane mosane. Construite en moellons de calcaire et de grès, elle serait antérieure au 12ème siècle, tandis que la crypte, située sous le chœur, daterait du 9ème siècle. L’église est en forme de croix latine à trois nefs et deux rangs de piliers. A l’intérieur de l’église, vous pourrez notamment admirer de nombreux trésors gothiques : les stalles, parmi les plus anciennes de Belgique(13ème siècle), un lutrin en pierre bleue (probablement du 16ème siècle), les fonts baptismaux en pierre bleue ornées de têtes d’angle (16ème siècle), des statues de la Vierge et de Saint Jean en bois polychrome (16ème siècle), et des bénitiers en pierre bleue qui seraient du 13ème siècle. Vous pourrez également y admirer de magnifiques vitraux datant de 1600 et représentant diverses scènes du Nouveau Testament et d’intéressantes pierres tombales, notamment celle en marbre noir qui héberge les dépouilles de Rasse de Celles et de son épouse.A l’extérieur, contre le chœur de l’église, côte gauche, vous pourrez découvrir, la chapelle Liedekerke-Beaufort. Cette famille – ce sont les châtelains de Noisy – a dressé au milieu du 19ème siècle, une riche chapelle. Ils y enterrent tous les membres de leur famille dans un caveau qui se trouve par-dessous, avec une porte extérieure donnant sur le vieux cimetière qui entoure l’église. Un peu plus loin, contre le mur d’enceinte, vous pouvez admirer un ensemble assez insolite d’anciennes pierres tombales. Remarquez en passant les meurtrières dans l’imposante tour de défense.