まずは問題を切り分けるために
エンコードせずにリッピングだけしたwavファイルでも
シーク時のトラブルが起こるか確かめるといいな
それで問題なければ完全にエンコードの問題