石破茂さん、自民党内の人気、消える