キーボードぐらいならUSBの奴もうひとつ買ってしまうとか
ゲストに割り振ればマウスがよそ行こうが非アクティブになろうが使えるよ

ちなみにUSBマウスもいける(独立して動かせる)がホストのポインタがゲスト上に被るとそっちが優先になるので注意が必要