普通に「ffmpeg mp3 画像 抽出」とかで検索すれば出てくるけど
https://gordiustears.net/getting-jacket-image-from-mp3/
複数ファイルの場合はループすればおけ

あとMp3tagのアクションとかでもできる