適切な場所で Quaternion.identity 入れるだけなんだから、何も難しいことはない
もう一つ付け加えるならば、
親子関係は一緒に影響を受けた方が都合がいいものを纏めるものだから、
もしこの先も同じように思うことがあるなら構造を見直したほうがいい

あと、質問は質問スレ行ったほうがいいぞ
またどや顔リファレンス見ろマンが現れて荒れるから