Wie an vielen Orten in Flandern, wurde auch in Olsene eine  Grotte errichtet, die Unserer Lieben Frau von Lourdes geweiht ist.  Frau Polydore Piers de Raveschoot wollte Menschen aus der Umgebung die Gelegenheit bieten, in der Nähe ‘Marias Unbefleckte Empfängnis’ zu verehren. Sie wählte die Kreuzung der Wege Olsene – Machelen-Leie und der Schloßallee (Kasteeldreef) als bevorzugten Ort aus.

Die Grotte, im Volksmund ‘Olsene Rotse’ (auf Deutsch: Olsener Grotte) genannt, wurde 1876 feierlich eingeweiht. Obwohl größere Pilgerfahrten und andere religiöse Traditionen in der Flämischen Region mehr und mehr verschwinden, ist die Marienverehrung an Orten wie dieser Grotte, immer noch lebendig.