参院選直後に辞任しておけば傷が浅かっただろうに