Pevnosť Alcazaba je jednou z najstarších častí Alhambry, ako je to v prípade Vermilionských veží (Torres Bermejas). Predpokladá sa, že predtým, ako bola postavená a predtým, ako moslimovia prišli do Granady, už bolo v tej istej oblasti niekoľko stavieb. Prvý historický odkaz na existenciu Alcazaba pochádza z 9. storočia a predpokladá sa, že ho potom postavil Sawwar ben Hamdun počas bojov medzi moslimami a muwalladínmi [kresťanmi, ktorí konvertovali na Islam a žili medzi moslimami].
Súčasný komplex postavil Mohammed I., ktorý postavil hradby okolo predchádzajúceho hradu, obrany a troch nových veží: rozbitú vežu (Torre Quebrada), vežu (Torre del Homenaje) a strážnu vežu (Torre de la Vela). V dôsledku toho sa Alcazaba stala skutočnou pevnosťou, kde kráľ založil kráľovskú rezidenciu. Jeho syn Mohammed II mal tiež bydlisko v Alcazaba, kým paláce neboli dokončené. Odvtedy sa Alcazaba používala iba ako pevnosť na vojenské účely.
Keď kresťania vzali mesto, vykonali veľa prác na oprave Alcazaba. V rôznych okamihoch svojej histórie, počas dlhého časového obdobia, sa používal ako štátne väzenie, dokonca aj počas francúzskej okupácie.
Rovnako ako Alhambra, Alcazaba bola opustená a nestarala sa o ňu po dlhú dobu a reštaurovanie, prieskum a inštalatérske práce sa začali až do konca 19. storočia a začiatku 20. storočia.