Grad Hirado stoji na hribu, straži pristanišče Hirado in ožino Hirado, ki je bila včasih del pomembne trgovske poti med Japonsko in azijskim kopnim. Prvotna trdnjava je bila zgrajena leta 1599 z lokalno Matsura Gospod; vendar pa mu uniči struktura po boju Tokugawa na izgubi strani Bitke Sekigahara kot gesta zvestobo victor. Klan Matsura je naslednja dve stoletji in pol vladal Hiradu.Novi grad (znan tudi kot Kameoka Grad) je bila zgrajena na mestu, sto let pozneje v 1718 kot del obalne obrambe postavili v Japonskem self uvedene umakne v Obdobju Edo. Ta struktura je stala več kot 150 let, vendar je sčasoma razpadla in je bila razstavljena v obdobju Meiji-ja. Danes so Kitakoguchi-mon vrata in Tanuki Yagura stolp edini izvirni objekti, ki še stojijo.
