自民・加藤氏、派閥離脱否定せず