Prvým jadrom hradu je megalitická stavba, ktorej zvyšky sú viditeľné na základni lombardského donjonu. K rozvoju opevneného komplexu došlo v druhej polovici 10. storočia; lombardský gróf Paldefredo a jeho nástupcovia posilnili pevnosť vybudovaním štvorhrannej ohrady s najmenej dvoma vežami. S príchodom Normanov hrad a dedina utrpeli rozsiahle škody od vojsk kráľa Rogera II. z Altavilly.
Počas anjelského obdobia bola vybudovaná priekopa a tri veľké kruhové veže so skosenou kužeľovou základňou. V roku 1443 hrad spolu s Aragóncami pripadol rodine Pandone. Gróf Francesco dal rozšíriť priekopu a postaviť cimburie, zatiaľ čo Enrico začiatkom 16. storočia premenil stavbu na rezidenciu a dal postaviť lodžiu, záhradu a významnú obrazovú výzdobu (1522 - 1527), ktorá zobrazovala najlepšie kone z jeho slávneho stáda.
Po Henrichovom sťatí za zradu Karola V. prešlo léno na ďalšie rody, vrátane Lannoyovcov, ktorí vykonali ďalšie zmeny v architektúre a výzdobe, čím zdôraznili obytný charakter hradu.