El palacio actual no tiene nada que ver con la antigua fortaleza medieval que está al origen. Y es que el palacio ducal se fue metamorfoseando a medida que sus sucesivos huéspedes iban dejando su impronta: los Farnesio, Felipe de Borbón en el s. XVIII, Napoleón Bonaparte a principios del s. XIX y, por último, su esposa María Luisa. Hoy el lugar custodia celosamente el recuerdo de su edad de oro. No hay más que echarle un vistazo a la Sala Grande, obra maestra de Petitot (1755), la los aposentos de la duquesa o a la capilla de San Liborio, magníficamente decorada.