Viandeni loss ehitati 11.ja 14. sajandi vahel Rooma lossi ja Karolingide varjupaiga alustele. See loss-palee kannab Hohenstaufen omadused ja on üks suurimaid ja parimaid feodaalne elukohad Rooma ja gooti ajastute Euroopas.
Kuni 15. sajandi alguseni oli see koduks võimsatele Viandeni krahvidele, kes võisid kiidelda oma tihedate sidemetega Saksa keiserliku õukonnaga. Neist suurim, krahv Henry I (1220 -1250) oli isegi abielus Kapetingide perekonna liikmega, kes valitses sel ajal Prantsusmaad. 1417.aastal päris lossi ja selle maad Saksa Nassau Maja noorem liin, mis-1530. aastal - omandas ka Prantsuse oranži Vürstiriigi. Lossi kõige tähelepanuväärsemad ruumid; Kabel, samuti väikesed ja suured paleed ehitati 12. sajandi lõpus ja 13.sajandi esimesel poolel.
Suurest paleest läänes asuv J Chrislichi hoone pärineb 14. sajandi algusest, nn Nassau kvartal ehitati alles 17. sajandi alguses. 1820. aastal, kui kuningas William I, Orange-Nassau Vürst, Viandeni krahv, valitses, müüdi loss Viandeni vürtsikaupmehele, kes müüs seda tükkhaaval, alustades mööblist ja lõpetades katusekilpidega. Selle tulemusena puutus loss elementidega kokku ja kukkus varemetesse.
Aastal 1890 sai loss Nassau vanema liini suurhertsog Adolphe omandiks ja jäi Suurhertsogite perekonna kätte kuni 1977.aastani, mil see läks riigi omandisse. See on hoolikalt taastatud oma endises hiilguses ja kuulub tänapäeval Euroopa kõige olulisemate ajaloomälestiste hulka.