El castillo construido por Guillermo de Varenne, uno de los más ardientes seguidores de Guillermo el Conquistador, originalmente no era más que una amplia casa fortificada de piedra. El torreón fue construido durante las guerras civiles de la década de 1140.