Die erste urkundliche Erwähnung der Burg von Caracciolo stammt aus der Zeit der Anjou, doch wurde die Burg wahrscheinlich schon früher gegründet, nach Ansicht einiger Historiker um das 4.
Von der Burg, die 1571 vollständig umgebaut wurde, sind noch der zylindrische Bergfried, der aus dem massiven Gebäude herausragt, und der kreisförmige Halbturm erhalten, der in der Mitte der Mauern steht, um die Gleichmäßigkeit des Vorhangs zu unterbrechen und eine bessere Verteidigung zu gewährleisten.
Die Caracciolos waren für die sukzessiven Erweiterungen und die einzigartige, fast dreieckige, dreigeschossige Form verantwortlich.
Eine steinerne Freitreppe führt zu einer Uferterrasse vor dem Haupteingang.
Die Caracciolo-Familie blieb durch verschiedene Höhen und Tiefen hindurch Besitzer des Lehens und des Schlosses bis 1857, als das letzte Mitglied der Familie, Maria Giulia, es ihrem Neffen Luigi Barracco vermachte.
