あーやっとできたわ
OnMouseOver()
の中で
Input.touchCount を見て1以上ならタッチされてるってわかった

もちろんPCでは動かないので面倒ッス