Le château de Loubens, lieu chargé d’histoire