hitTestでなく普通のif判定文にすれば
微量は早くなるんだろうけれども、ほんとうに微量だろうね。
大抵処理おせえとかいってるのは
扱っている画像に問題があるんでしょう。
パスの多すぎるベクターデータ動かしてるとか。