저출산, 인구소멸, 초고령화 보다 더 심각한 문제