「男らしくない」のがあなたの個性なんだから、無理に直すことはないんじゃないかな？
あなたの奥さんだって、元々「男らしくない」のを承知で結婚したんでしょう？何を今更文句言うんだろうね。
「男らしくない」と言われると傷つくこととか、スルーして欲しいということを普通に率直に言ってみたらどう？上に書いたようなこと説明して、理解してくれないような嫁だったら一生一緒に暮らしていくのは難しいと思うよ。