El gobernador de los Países Bajo mandó erigir este palacio entre 1756 y 1780 sobre el emplazamiento de la antigua casa solariega de los Nassau. De la construcción original solo queda el ala neoclásica que cierra la plaza. Tras su renovación, las bonitas salitas (en particular el salón redondo, decorado con un espléndido suelo de mármol) albergarán exposiciones temporales como The World of Bruegel in Black and White (estampas, dibujos de Brueghel).