印象論だけ語っても仕方ないので労働力調査のH24.1とH30.1のデータ比較すると
就業者　6211万人（男3607、女2604）　→　6562万人（男3681、女2882）
完全失業者　291万人　→　159万人
非労働力人口　4601万人　→　4372万人

失業者が132万人減る一方で非労働力人口229万人が減ってる、その就業者になった大半は女性。
付け加えると15歳以上人口は1億1103万人から1億1093万人に微減しただけだから
労働市場から退出した高齢者もかなり少ないのだろうね。