Este castillo custodia la ciudad y la campiña circundante desde el s. XI. Transformado entre los ss. XIII y XVI, ha conservado todo su empaque, como puede apreciarse ya desde la entrada, protegida por un puente levadizo y un recio castillete flanqueado por dos sólidas torres con matacanes. La torre de San Lorenzo ofrece una magnífica vista de los tejados de pizarra, a la vez que permite apreciar la estrechez de las calles. Esta torre alberga, junto a las torres de la Plata y del Oratorio, las colecciones del museo (esculturas, arte sacro, esmaltes...).