Замъкът Ивакуни е построен през 1608 г., в началото на периода Едо. Мястото за замъка е избрано поради естествените му отбранителни предимства на върха на планината Широяма и наполовина заобиколена от естествен ров, река Нишики. Замъкът е висок четири етажа и гледа към града на 200 метра по-долу.
Вероятно източникът на значително разочарование за тези, които са го построили, е фактът, че първоначалният замък е съществувал само малко по-дълго, отколкото е било необходимо за изграждането му. Построен в продължение на пет години, замъкът е разрушен с указ на шогуна само седем години след завършването му.
Настоящата реконструкция датира от 196 година