だから、描画の際に、たぶんHALで計算してんだから、
そんときに算出されたワールド座標を流用すればいいでしょ。
それがムリなら、座標変換を、個別に指定できるべきだし