脳活動から「頭の中の光景」を動画にできるAIを開発！将来的に見た夢の映像化も!?
2023.05.29
>>今回はそれを動画に発展させています。
略
現時点ですでに80%という高い精度での画像復元に成功しています。
略
>>fMRIは数秒に一度の間隔で脳活動のスナップ写真を取り込むので、これを画像化するだけでは質の悪い映像になってしまいます。
略
>>チームは新たに、fMRIデータから時空間情報を学習するAIモデル「Mind-Video」を開発しました。
>>これまでの技術では、脳活動のデータをそのまま静止画として画像化していましたが、Mind-VideoはfMRIデータの時空間情報を学習することで、断続的に得られた画像の間を埋めて滑らかに繋ぐことができます。
>>そして被験者に映像サンプルを見てもらいながら訓練を続けた結果、Mind-Videoは85%という高い精度で、映像の視覚情報や動きのダイナミクスを復元できるようになったのです。
略
>>また「さらに重要なのは、走る・踊る・歌うなどの動作や、速い動きのシーン、街並みのロングショットのシーンなど、映像のダイナミクスも正しく再構成できたことです」と続けています。