Iwakuni loss ehitati 1608. aastal Edo perioodi alguses. Saidi lossi valiti oma loomuliku kaitsev eeliseid peal Mount Shiroyama ja pool ümbritsetud loodusliku Vallikraavi, Nishiki jõgi. Lossihoone on nelja korruse kõrgune ja vaatab linnale 200 meetrit allpool.
Tõenäoliselt allikas märkimisväärset pettumust neile, kes ehitasid, originaal lossi kestis vaid veidi kauem kui aega kulus ehitada see. Viie aasta jooksul ehitatud loss lammutati Shoguni dekreediga vaid seitse aastat pärast selle valmimist.
Praegune rekonstrueerimine pärineb 196