El palacio se encuentra en Abadía. Está declarado Conjunto Histórico Artístico desde 1931. Tal como cuenta la historia de Abadía este palacio fue en un principio una fortaleza utilizada por los templarios, pasando posteriormente a Abadía de monjes cistercienses. En el S. XV el pueblo y el palacio pasaron a manos de la Casa de Alba, transformando el antiguo edificio y convirtiéndolo en palacio. Fue con la Casa de Alba cuando llegó a ser un centro cultural y artístico de gran importancia, academia literaria  de artistas italianos y flamencos, y al que asistieron entre otros Lope de Vega y Garcilaso de la Vega. Lo más destacado de edificio es su patio mudéjar en perfecto estado de conservación. El piso bajo posee arcos en herradura tumida sustentados sobre pilares con molduras cuadradas a modo de basas con capiteles piramidales con decoración escultórica. Los arcos de la galería superior son escarzanos propios del siglo XVI y con los escudos heráldicos de la Casa de Alba en las esquinas. El jardín renacentista se creo como símbolo del prestigio para exaltar la fama y la figura del gran Duque de Alba. Era un espacio en el que se mezclaban construcciones arquitectónicas, escultóricas, pinturas y estucos, con diferentes especies vegetales, variedad de árboles, juegos y artificios de agua, cenadores y fuentes monumentales. En la actualidad se encuentra muy deteriorado y solo quedan algunos restos del maravilloso jardín. El Palacio se puede visitar los Lunes (excepto festivos) de 10:00 a 11:15 horas. Entrada libre.