キャッシュが巻戻らないのが問題点なのだし
溢れた分がパイプラインをストールさせずに
素早く巻き戻らないと結局性能劣化する
根本から再設計しないと性能落ちないようには治らないよ