높아지는 '가점 장벽'에 무용론 확산…금리 올렸지만 이탈 가속