Το σπήλαιο "Παναγιάς του βράχου" Βρίσκεται λίγο πιο έξω από το χωριό Κάτω Ταρσός. Ξεκινώντας, λοιπόν, από το σχεδόν έρημο χωριό του Κάτω Ταρσού, ακολουθούμε το χωματόδρομο με κατεύθυνση νοτιοδυτικά. Μετά από πορεία 1,5 περίπου χιλιομέτρου, στην οποία μας συντρόφευε η εντυπωσιακή θέα προς τη Ζήρεια, ξεπρόβαλε μπροστά μας ένας τόπος μαγικός
Λίγο πιο κάτω, σε μια άλλη μεγάλη σχισμή, είναι χτισμένο το εκκλησάκι της Παναγίας του Βράχου. Κατά την παράδοση, το εκκλησάκι της Παναγίας στον βράχο του Ταρσού, ιδρύθηκε ως εκπλήρωση τάματος από κάποια Ταρσινή γυναίκα, η οποία σώθηκε ως εκ θαύματος κατά την άλωση του Βυζαντινού Ταρσού από τον Μωάμεθ Β’ το 1458
Ως γνωστόν, ο Μωάμεθ Β’ πολιόρκησε το κάστρο του Ταρσού και ανάγκασε τους πολιορκημένους να παραδοθούν. Από αυτούς που παραδόθηκαν, πολλούς τους φόνευσε, άλλοι συνελήφθηκαν αιχμάλωτοι και κάποιοι κατόρθωσαν να σωθούν. Από τις γυναίκες, άλλες τις πήραν μαζί τους σκλάβες και άλλες τις γκρέμισαν στο βράχο του Ταρσού (κατά άλλους, μερικές γυναίκες του Ταρσού πήδηξαν μόνες τους από τον βράχο για να μη γίνουν σκλάβες των Τούρκων), εκεί που είναι σήμερα η εκκλησία της Παναγίας.
