Παλιότερα το χωριό λεγόταν Κάστελλος, από το κάστρο που είχαν κτίσει οι Ιππότες πάνω σ’ έναν ψηλό βράχο, έξω από τον οικισμό. Το 1948 αποφασίστηκε να του δοθεί ένα ελληνικό όνομα κι έτσι μετονομάστηκε σε Κρητηνία. Το κάστρο της Κρητηνίας ή Κάστελλος, δεσπόζει σ’ έναν βράχο πάνω από τη θάλασσα. Η πρώτη γραπτή αναφορά σ’ αυτό ως Castel Nuovo, χρονολογείται στα 1480. Στο εσωτερικό του υπάρχουν τα υπολείμματα των οικημάτων όπου έμενε η φρουρά και τα ερείπια της καθολικής εκκλησίας του Αγίου Παύλου.
Αξίζει να κάνετε μια στάση στην πλατεία της Κρητηνίας, στο καφενεδάκι που βρίσκεται κάτω από τη σκιά του αιωνόβιου πλάτανου. Την πλατεία κοσμεί μια μαρμάρινη κρήνη, που έφτιαξαν το 1914 οι Ιταλοί. Λίγο πιο πέρα βρίσκεται το εκκλησάκι του Αγίου Ιωάννη, με τοιχογραφίες του 16ου αιώνα.