Το κάστρο του Μονόλιθου είναι, ίσως, το πιο εντυπωσιακό της Ρόδου και βρίσκεται πάνω σ’ ένα βράχο ύψους 236 μ., με θέα στο πέλαγος και στη Χάλκη. Το έκτισε ο Μάγιστρος d’ Aubusson το 1476, πάνω στα ερείπια παλιότερης βυζαντινής οχύρωσης. Στο εσωτερικό του υπάρχουν δυο εκκλησάκια, το ένα δίπλα στ’ άλλο, ένα ερειπωμένο κι ένα ανακαινισμένο –ο Αγιος Παντελεήμονας, του 15ου αιώνα. Ο δρόμος φτάνει μέχρι τη ρίζα του βράχου και από εκεί ανεβαίνει στο κάστρο μονοπάτι με σκαλοπάτια. Κάποιοι υποστηρίζουν ότι το όνομα Μονόλιθος δεν οφείλεται στο βράχο πάνω στον οποίο είναι χτισμένο το κάστρο, αλλά σε ένα μαύρο μονόλιθο με μεταφυσικές δυνάμεις, που έφεραν οι Ιππότες από τους Αγίους Τόπους. Λένε μάλιστα πως ο μονόλιθος αυτός βρίσκεται ακόμα εκεί, θαμμένος και αν ποτέ τολμήσει κανείς να τον ξεθάψει, θα καταποντιστεί ολόκληρο το νησί!