À gauche de la collégiale, ne manquez pas la Fontaine Sainte-Begge.
On raconte que Begge a choisi de construire son monastère dans une vallée majestueuse dans laquelle coulait une source toujours fraîche. De là à dire qu’il s’agit de la source alimentant cette fontaine, il n’y a qu’un pas que les Andennais franchissent allègrement… Ne dit-on pas que cette eau est riche en minéraux et qu’elle est à 10C° toute l’année ?
Anciennement appelée « fontaine aux Poussins », cette fontaine est surmontée d'un monument du 17ème siècle. Juste au dessus du premier bassin, vous remarquerez une petite niche grillagée dans laquelle trône une statue de la sainte patronne.
La fontaine comporte trois bassins : le premier dédié à l'eau de boisson et de cuisine, le deuxième au bétail, et le dernier à la lessive.
La tradition orale nous rapporte une anecdote sur ce monument. Les lavandières du quartier auraient eu pour habitude de traverser la collégiale pour accéder aux bassins. Agacé par cette manie, le clergé aurait alors décidé de faire graver une épitaphe au-dessus de l’entrée droite de la collégiale. Cette inscription est encore visible aujourd'hui, elle dit : LES CHIENS HORS DE LA MAISON DE DIEU. Comme si la consigne n'était pas assez claire, on va même jusqu'à raconter qu'un garde était posté à cette entrée pour obliger ces dames, leur linge, leurs enfants et leurs chiens, à faire le tour...