В 1623 году строительство дворца Карла V окончательно остановилось. К тому времени работы шли почти столетие, но здание так и не стало резиденцией императора, а со временем обрушилась и его крыша. Строительство началось в 1527 году, через год после визита Карла V и Изабеллы Португальской в Гранаду.
В 2027 году исполнится 500 лет с начала строительства. Сегодня дворец воспринимается как часть Альгамбры, однако спор о его месте в комплексе не утихает: для одних это чужеродная постройка среди памятников исламского прошлого, для других, значительный образец архитектуры эпохи. Дворец Карла V стоит отдельно от Насридских дворцов и представляет собой ренессансный памятник на территории комплекса. ЮНЕСКО включает Альгамбру, Хенералифе и Альбайсин в единый объект Всемирного наследия, отражающий историческую многослойность Гранады. В Испании спорят и о других вопросах, например о ходатайствах в Сеуте.
Замысел возник после приезда Карла V в Гранаду в 1526 году, когда он уже был женат на Isabel de Portugal. Супруги провели в Альгамбре медовый месяц и пробыли в городе шесть месяцев. Император был впечатлен дворцом и решил построить там собственную резиденцию. После отъезда он почти сразу утратил интерес к проекту. При жизни Карла V дворец так и не стал полноценной императорской резиденцией.
Причины отъезда императрицы из Альгамбры объясняют по-разному. Одни связывали его с холодом в старых дворцовых помещениях, другие, со страхом перед землетрясениями. Есть и версия: после беременности Isabel de Portugal предпочла уединение монастыря San Jerónimo, подальше от придворной суеты. Политическая трактовка проекта видит в нем жест Карла V: император хотел символически соединить христианскую власть с наследием прежней арабской королевской резиденции.
Проект поручили Pedro Machuca, архитектору с итальянской подготовкой, работавшему в среде римского Возрождения. Дворец получил квадратный план со сторонами около 63 метров и круглый внутренний двор диаметром примерно 30 метров. В 1527 году началось строительство квадратного блока с круглым внутренним двором, где поставили 32 колонны из конгломерата, осадочной породы из Loja. Нижний ярус колоннады выполнен в дорическом ордере, верхний, в ионическом; на фасадах использованы рустика, пилястры и классические ордерные элементы. Средства поступали в том числе от морисков: с них взимали налог за сохранение обычаев и ежегодный взнос на строительство, как указывал Manuel Gómez Moreno.
После отъезда императорской четы работы замедлились. Pedro Machuca и затем его сын Luis занимались ими почти сорок лет. После смерти Pedro строительством руководил Luis, продолживший проект. Позже к нему привлекали и других архитекторов. В XVII веке работы прекратились, дворец остался незавершенным. В XIX веке туристы, приезжавшие в Альгамбру, часто проходили мимо. Gautier считал здание чужеродным элементом, а Wolzogen осуждал саму идею новой резиденции рядом с восточными постройками.
Восстановление началось в 1923 году. Сначала им руководил Leopoldo Torres Balbás, затем Francisco Prieto Moreno. Torres Balbás признавал, что массив здания изменил облик места по сравнению с мусульманской эпохой, но считал, что два архитектурных мира могут сосуществовать, не смешиваясь.
В 1958 году Prieto Moreno определил дворцу новое назначение: музейные помещения и офисы, а залы отвел для представительских мероприятий Patronato de la Alhambra. Там находятся Museo de Bellas Artes и Museo de la Alhambra. Во время музыкальных фестивалей во дворце проходят концерты. Gómez Moreno высоко оценивал порталы дворца, а Juan Bustos называл здание одним из самых интересных памятников испанского Возрождения. Сегодня Альгамбра и Хенералифе находятся под управлением Patronato de la Alhambra y Generalife, который отвечает за сохранение и изучение комплекса. Дворец по-прежнему служит музеем и площадкой для культурных мероприятий.