Στα τέλη του 19^ου αιώνα λέγεται πως ένας βοσκός είχε ξαπλώσει κάτω από έναν θάμνο για να ξεκουραστεί και πως με την επιστροφή του πίσω στο χωριό οι συγχωριανοί του είδαν αποτυπωμένη στο πουκάμισό του τη μορφή του αγίου Ιωάννη του Προδρόμου. Αμέσως του ζήτησαν να τους οδηγήσει στο μέρος όπου είχε ξαπλώσει, όπου και ανακάλυψαν την είσοδο του σπηλαίου. Γονατίζοντας και μπουσουλώντας για να εισέλθουν στο σπήλαιο, βρήκαν έκπληκτοι την εικόνα του αγίου Ιωάννη και έτσι το σπήλαιο πήρε το όνομά του.

Κάθε χρόνο από τότε, παραμονή της γιορτής του αγίου Ιωάννη, επισκέπτες και κάτοικοι κάθε ηλικίας πηγαίνουν στο σπήλαιο για να προσκυνήσουν την εικόνα σε μια ολοήμερη γιορτή. Η Θεία Λειτουργία αρχίζει από το πρωί και στη συνέχεια οι πιστοί γευματίζουν μέσα στο σπήλαιο. Τις απογευματινές ώρες τελείται ο Εσπερινός και το βράδυ ολοκληρώνονται οι τελετουργίες.