Defferre, la fin d’un rêgne