El nombre de este palacio va unido al del rey Federico VII y el de su esposa morganática la condesa Danner, con la cual se casó en terceras nupcias y a la cual legó la propiedad. Ésta lo donó a una institución para señoritas en dificultades con la condición de que el ala sur -de los ss. XVII y XVIII y en la cual vivió con el rey- se mantuviera tal cual y fuera abierta al público. El ala norte es del XV mientras que la imponente torre de escalera fue añadida por Cristián IV. Posteriormente se añadiría una tercera ala.