Úgy tűnik, hogy a Chateau De La Brède egy mese oldalairól lép. Leghíresebb egykori tulajdonosa a 18. századi francia filozófus és író, Charles-Louis de Secondat volt, Montesquieu néven ismert.Montesquieu, a felvilágosodás korában nagy politikai gondolkodó, La Brède-ban született és nőtt fel, amíg 11 éves korában Párizsba nem küldték tanulni. Apja halála után hatalmas vagyont és La Brède báróját örökölte.Természetesen a birtoknak már hosszú története volt Montesquieu előtt. Először 1079-ben említik, amikor La Brède ura párbajozott egy Hernandes nevű emberrel, aki a navarrai hadsereg bajnoka volt. Abban az időben, az épület volna egy erődített fa szerkezet épült egy mesterséges halom föld, a közepén egy kivájt árok.
Két évszázaddal később a faszerkezet leégett, 1306-ban pedig egy sokkal szilárdabb, kő gótikus stílusú kastély építése kezdődött.