その辺のことがわかるならわかりそうだけどな。
カメラのトランスフォームとっておいて
キー入力のHorizon,Verticalをx.yとして正規化したVectorを
カメラのY軸回転だけとって回転させたものでTranslateすればいいんじゃね？
平行移動がいやならキャラのオブジェクトもそれで回転すればいいし