Σύμφωνα με ανασκαφές που έχουν λάβει χώρα στο λόφο, εδώ βρισκόταν η μία από τις δύο ακροπόλεις που υπήρχαν στους Ωρεούς τον 4ο αιώνα π.Χ. Τότε ήταν και τα χρόνια της ευημερίας για την πόλη, όπου και ήταν το πνευματικό κέντρο της βόρειας Εύβοιας, και ένα από τα πιο γνωστά κέντρα της αρχαίας Ελλάδας. Το κάστρο ανεγέρθηκε εκ νέου επί ενετοκρατίας. Μεγάλη φήμη απέκτησε μετά το 1275, όταν το κατέλαβε ο καρυστινός ιππότης Λικάριο και το χρησιμοποιούσε ως ορμητήριό του κατά των Φράγκων.
Σήμερα ο επισκέπτης δεν έχει πολλά να δει μιας και είναι εντελώς παραμελημένο και αφημένο στην τύχη του. Σώζονται τμηματικά κομμάτια οχύρωσης μέγιστου ύψους 2,5 μέτρων. Πέρα από αυτό, ο λόφος προσφέρει μοναδική θέα στη πόλη των Ωρεών.
Φωτογραφίες από το κάστρο των Ωρεών