El Hamra Sarayı'nın hikayesi şu şekilde özetlenebilir: İlk yapılanma: Sarayın ilk temelleri, MS 889 yılına dayanan Roma Dönemi surlarının üzerine küçük bir kale inşa edilmesiyle atılmıştır. Nasrid Dönemi: 13. yüzyılın ortalarına kadar atıl kalan kale, Granada Sultanı Muhammed Nasrid döneminde bugünkü görünümüne kavuşmuştur. Hristiyan egemenliği: 1492'de Granada'nın Hristiyan Krallar tarafından fethedilmesiyle saray, Hristiyan egemenliğine geçmiştir. Restorasyon: 19. yüzyıl sonunda başlayan restorasyon çalışmaları, 20. yüzyılda hız kazanmış ve sarayın eski ihtişamına kavuşmasına katkı sağlamıştır. Ayrıca, sarayın yapımında çalışan işçilerin her bir taşı dua ve niyetlerle yerleştirdiğine dair bir rivayet bulunmaktadır.