Замак Ивакуни быў пабудаваны ў 1608 годзе, у пачатку перыяду Эдо. Месца для замка было абрана з-за яго натуральных абарончых пераваг на вяршыні гары Широяма і напалову акружана натуральным ровам-ракой Нисики. Замак вышынёй у чатыры паверхі выходзіць на горад, які раскінуўся ў 200 метрах ўнізе.
Верагодна, крыніца значнага расчаравання для тых, хто пабудаваў яго, першапачатковы замак праіснаваў толькі трохі даўжэй, чым спатрэбілася для яго будаўніцтва. Пабудаваны на працягу пяці гадоў, замак быў знесены па ўказе сягун ўсяго праз сем гадоў пасля яго завяршэння.
Цяперашняя рэканструкцыя датуецца 196 годам