Segovia Alcazar asub Eresma ja Clamores jõgede liitumiskohas. Esimene kirjalik viide selle olemasolule on kristlik ja pärineb kaheteistkümnenda sajandi algusest. See ehitati kivile, kuna see näitab oma esialgset sõjalist funktsiooni. See oli seal Alfonso VIII. Kolmeteistkümnendal sajandil hoone omandanud gooti aspekti koos sekkumist arhitektid John II ja Henry IV. Viimase arhitektuuri-etapil järgnesid 1587 mida arhitekt Francisco de Mora, ilmselt koostöös Juan de Herrera, kes ehitas peamine hoov ja Escuela de Au. 1764. aastal asutas Charles II seal kuningliku suurtükiväe kolledži. Hoones on mitu salajast koridori, mis laskuvad jõele ja on ühendatud mõne linna paleedega.
