Sie wurden 1875 mit zwei Becken und einem Restaurant eingerichtet. Diese Bäder, die früher von der Straßenbahn nach Ensisheim angefahren wurden, verdankten ihren Namen dem Rheinwasser, das über den Rhône-Rhein-Kanal und den Huningue-Kanal ankam. Das Wasser, das aus dem Neuen Becken abfließt, bildet zwei Flüsse: die alte Ill auf der linken Seite und den Quatelbach auf der rechten Seite.