O palácio está localizado em Abadia. Foi declarado Conjunto Histórico-Artístico desde 1931. Tal como conta a história da Abadia, este palácio foi inicialmente uma fortaleza utilizada pelos Templários, tornando-se posteriormente uma Abadia de monges cistercienses. No século XV a vila e o palácio passaram para as mãos da Casa de Alba, transformando o antigo edifício e transformando-o em palácio. Foi com a Casa de Alba que se tornou um centro cultural e artístico de grande importância, uma academia literária de artistas italianos e flamengos, frequentada, entre outros, por Lope de Vega e Garcilaso de la Vega. O destaque do edifício é o seu pátio mudéjar em perfeito estado de conservação. O piso térreo apresenta arcos tumida em ferradura sustentados por pilares com molduras quadradas como bases com capitéis piramidais com decoração escultórica. Os arcos da galeria superior são segmentos típicos do século XVI e com os escudos heráldicos da Casa de Alba nos cantos. O jardim renascentista foi criado como símbolo de prestígio para exaltar a fama e a figura do grande duque de Alba. Era um espaço em que se misturavam construções arquitetônicas e escultóricas, pinturas e estuques, com diferentes espécies vegetais, variedade de árvores, jogos e artifícios aquáticos, mirantes e fontes monumentais. Atualmente encontra-se muito deteriorado e restam apenas alguns vestígios do maravilhoso jardim. O Palácio pode ser visitado às segundas-feiras (exceto feriados) das 10h00 às 11h15. Entrada livre.