हिराडो कैसल एक पहाड़ी की रखवाली हिराडो पोर्ट और हिराडो जलडमरूमध्य पर खड़ा है, जापान और एशियाई मुख्य भूमि के बीच एक महत्वपूर्ण व्यापार मार्ग का हिस्सा हुआ करते थे जो. मूल किले स्थानीय मात्सुरा प्रभु द्वारा 1599 में बनाया गया था; हालांकि, वह विक्टर के प्रति वफादारी का एक संकेत के रूप में सेकिगाहारा की लड़ाई के हारी ओर तोकुगावा लड़ने के बाद संरचना को नष्ट कर दिया । मथसुर कबीले अगले ढाई शताब्दियों के लिए हिराडो सत्तारूढ़ जारी रखा.एक नया महल (भी रूप में जाना जाता कामिओका कैसल) साइट पर एक सौ साल बाद 1718 में तटीय सुरक्षा के भाग के रूप में बनवाया ईदो काल में जापान के आत्म लगाया तनहाई के दौरान बनाया गया था । यह संरचना 150 से अधिक वर्षों के लिए खड़ा था, लेकिन अंत में जीर्णता में गिर गई और मीजी अवधि के दौरान ध्वस्त किया गया था । आज, किटाकोगुची-सोम गेट और तनुकी यागुरा घड़ी टॉवर अभी भी खड़े ही मूल संरचनाओं हैं ।