Η Καρύταινα είναι ανακηρυγμένος παραδοσιακός οικισμός, καθώς διατηρεί το χρώμα της μεσαιωνικής καστροπολιτείας. Κύριο αξιοθέατο είναι το κάστρο της, χτισμένο στην κορυφή του λόφου πάνω από τον οικισμό.
Έχει μήκος που ξεπερνά τα 110 μέτρα και πλάτος που ξεπερνά τα 40.
Τα τείχη του φτάνουν σε ύψος μέχρι τα 7 μέτρα και σε πλάτος μέχρι τα 2.
Κοντά στην Καρύταινα ρέει ο ποταμός Αλφειός, ο οποίος σχηματίζει στα δυτικά της Καρύταινας μεγάλο φαράγγι, συμβάλλοντας στη φυσική οχύρωση της περιοχής.
Πάνω στον Αλφειό, κοντά στην Καρύταινα, διασώζονται δύο παραδοσιακά γεφύρια, το γεφύρι του Κούκου και το γεφύρι της Καρύταινας. Στην περιοχή αυτή λειτουργούσαν στο παρελθόν πολλοί νερόμυλοι, ερείπια των οποίων σώζονται ακόμα.
Η Καρύταινα έχει εντυπωσιακή εικόνα όταν την αντικρίζει ο επισκέπτης από μακριά. Παλαιότερα απεικονιζόταν στην μία πλευρά του χαρτονομίσματος των 5.000 δραχμών.
Ο συγγραφέας Νίκος Καζαντζάκης, όταν την επισκέφθηκε, την χαρακτήρισε Τολέδο της Ελλάδας.
