Palazzo Ducale byl postaven Petracone V Caracciolo v roce 1668, na místě, kde kdysi stál středověký hrad postavený v 1388, Raimondo Orsini del Balzo, kníže z Tarentu a počítat Lecce a Martina. Projekt paláce byl dílem architekta Giovanniho Andrea Carducciho a podpořil ho Gianlorenzo Bernini.
Palazzo Ducale je nyní sídlem Radnice Martiny Francy a Městské knihovny. Uvnitř strovano bohatě zdobené pokoje, které můžete navštívit.