Στη βόρεια πλευρά του νησιού βρίσκεται το μικρό εκκλησάκι των Αγίων Αναργύρων στην άκρη του γκρεμού, στο οποίο οδηγεί ένα μικρό μονοπάτι μέσα από το δάσος. Σύμφωνα με την παράδοση, οι Αλοννησιώτες είχαν επιλέξει άλλο σημείο για να χτίσουν το μοναστήρι, όμως η εικόνα εξαφανιζόταν τα βράδια και την έβρισκαν το πρωί στο σημερινό σημείο. Αυτό έγινε αρκετές φορές και έτσι αποφασίστηκε να χτιστεί στο σημείο αυτό.
Αρχικά λειτούργησε ως μοναστικό κέντρο, πράγμα που αποδεικνύεται από ερείπια κελιών και βοηθητικών χώρων και υπαγόταν στη Μονή Μεγίστης Λαύρας. Ο ρυθμός της εκκλησίας είναι μονόκλιτη βασιλική με τρούλο και στις τέσσερις γωνίες υπάρχουν εντοιχισμένες κεραμικές στάμνες για καλύτερη ακουστική. Ο μεγάλος σεισμός δημιούργησε μεγάλες καταστροφές, σε συνδυασμό με τις ιστορίες για κρυμμένους θησαυρούς που ώθησαν κάποιους να καταστρέψουν μεγάλο μέρος του εσωτερικού της ψάχνοντας να τους βρουν. Σήμερα δίπλα από το εκκλησάκι έχει χτιστεί ένας νέος ναός, με έναν χαρακτηριστικό κόκκινο τρούλο που διακρίνεται από μακρυά.