Hirado Istana berdiri di atas bukit menjaga Hirado Pelabuhan dan Hirado Selat, yang digunakan untuk menjadi sebahagian daripada yang penting rute perdagangan antara Jepang dan Asia tanah besar. Asal benteng telah dibina di 1599 oleh tempatan Matsura Tuhan; walau bagaimanapun, dia dimusnahkan struktur setelah pertempuran Tokugawa di pihak yang kalah dari Pertempuran Sekigahara sebagai tanda kesetiaan kepada victor. Itu Matsura Clan terus pemerintah Hirado selama dua setengah abad.Sebuah istana baru (juga dikenal sebagai Kameoka Istana) telah dibina di laman web seratus tahun kemudian di 1718 sebagai bagian dari pantai pertahanan didirikan pada diri Jepun dikenakan pengasingan di zaman Edo. Ini struktur berdiri selama lebih dari 150 tahun, tetapi akhirnya jatuh ke rosak dan telah dibongkar dalam Tempoh Meiji. Hari ini, Kitakoguchi-mon Pintu dan Tanuki Yagura menonton menara itu hanya asal struktur masih berdiri.