Μέσα από την ιδιαίτερη αρχιτεκτονική ομορφιά της Καστάνιτσας ξεπροβάλλουν τα πυργόσπιτα που όλα τους κουβαλούν ιστορία αρκετών αιώνων. Διάσπαρτα σε όλες τις γειτονιές του χωριού αλλά κυρίως στη γειτονιά του Πύργου ξεχωρίζουν με τον επιβλητικό τους όγκο.
Όλα είναι κατασκευασμένα τουλάχιστον πριν από τριακόσια χρόνια και είναι τριώροφα, με μικρά ξύλινα μπαλκόνια, με επίσης μικρά παράθυρα, με στέγη βέβαια με πλάκες Πάρνωνα, ενώ αρκετά διατηρούν ακόμα μικρές πολεμίστρες, δείγμα του ότι η Καστάνιτσα υπήρξε ορμητήριο της κλεφτουριάς όχι μόνο κατά τον μεγάλο ξεσηκωμό του 1821 αλλά πολύ πιο πριν. Αξίζει τον κόπο κάθε επισκέπτης να περιπλανηθεί στις γειτονιές, να ανακαλύψει τα ιστορικά αυτά κτήρια, να τα θαυμάσει και να τα αποτυπώσει με τη φωτογραφική του μηχανή.
