Le Château, ses séjours