Το Chateau de la Brède φαίνεται να βγαίνει από τις σελίδες ενός παραμυθιού. Ο πιο διάσημος πρώην ιδιοκτήτης του ήταν ο Γάλλος φιλόσοφος και συγγραφέας Charles-Louis de Secondat του 18ου αιώνα, γνωστός ως Montesquieu.Ο Montesquieu, ένας μεγάλος πολιτικός στοχαστής στην εποχή του Διαφωτισμού, γεννήθηκε και μεγάλωσε στο La Brède μέχρι να σταλεί στο Παρίσι στην ηλικία των 11 ετών για να σπουδάσει. Μετά το θάνατο του πατέρα του, κληρονόμησε μια τεράστια περιουσία και τη Βαρωνία του La Brède.Φυσικά, το κτήμα είχε ήδη μακρά ιστορία πριν από το Montesquieu. Αναφέρθηκε για πρώτη φορά το 1079 όταν ο άρχοντας της La Brède πολέμησε μια μονομαχία με έναν άνθρωπο που ονομάστηκε Hernandes ο οποίος ήταν ο πρωταθλητής του στρατού της Ναβάρας. Εκείνη την εποχή, το κτίριο θα ήταν μια οχυρωμένη ξύλινη δομή χτισμένη σε ένα τεχνητό ανάχωμα γης, στο κέντρο μιας τάφρου εκσκαφής.
Δύο αιώνες αργότερα, η ξύλινη δομή καίγεται και το 1306 ξεκίνησε η κατασκευή σε ένα πολύ πιο ανθεκτικό, πέτρινο κάστρο γοτθικού στιλ.