Hirado Dvorac je na brdu čuvaju Hirado Luku i Hirado Tjesnac, koja je bila deo važan trgovačke rute između Japan i Azijske kopno. Originalnih izgrađena je u 1599 lokalna Matsura Gospode, međutim, uništio je struktura nakon borbe Tokugawa na gubitničkoj strani Bitka za Sekigaharu kao gest odanost victor. Matsura klan je nastavio da vlada Hajrado naredna dva i po veka.Novi dvorac (poznat i kao Kameoka Dvorac) je sagrađena na sajt od stotinu godina kasnije u 1718 kao dio priobalnim odbranu podignute tokom Japan je samo uvela samici u Edo Period. Ova građevina je stajala preko 150 godina, ali je na kraju pala u stanje nereda i demontirana tokom Meiji perioda. Danas, Kitakoguchi-mon Gate i Tanuki Yagura toranj su jedine originalne strukture koje još uvijek stoje.
