A fortificação do Castrum de Malvito tem origens antigas. Novas investigações seriam necessárias para certificar a data real: uma vez que na era Lombarda a cidade era sede episcopal e gastaldato, é possível colocar a hipótese de um primeiro edifício nesse período.
O castrum original, no entanto, estava certamente ativo no período bizantino. Mais tarde, fontes literárias contar de sua pertença ao duque Normando Roberto chamado de "o Scalone", — filho de Guiscardo e Sikelgaita, Senhor de Malvito e Scalea-que pode ter fortalecido e melhorou a estrutura original. Originalmente, esta foi provida com duas cortinas de parede: a para proteger a Acrópole, adjacente à torre majestosa e a exterior, provavelmente destinada a proteger a cidade.
No interior, são preservados os restos da porta fortificada e uma seção da parede de fronteira, que atinge uma espessura de 120 cm, uma curta distância da qual é possível observar uma torre quadrada que data de cerca do século IX-X.
Apenas emergindo do chão, então, no pátio do castelo são visíveis as cristas de parede de um edifício retangular, identificável com uma torre bizantina (talvez a fortaleza Central).