Georges Frêche, la polémique de trop