"Domus domini imperatoris in Ebulo" smatra se jednim od najvažnijih u srednjem vijeku. Njegova rekonstrukcija datira iz druge polovice XI stoljeća, vjerojatno tijekom feudalne vladavine prvog Gospodina Eboli, Wilhelma d ' Altavilla, brata Roberta Guiscarda, princa Salerna.
Dokument iz 1640. godine sugerira da je dvorac izgrađen iznad postojeće utvrde longobardo.Il kompleks, trenutno okružna kuća, obično se identificira kao dvorac Colonna, jer je u XV stoljeću doživjela značajne restauracije u ime Antonio Colonna, unuka pape Martina V.