微妙な違いかもしれないので、ニュアンスを汲んでいただければ…。

彼は「ヒゲを剃るのがイヤ」だったのですか?
それとも「ヒゲを伸ばしていたかった」?