NGUI ではない、標準の scrollView でボタンを縦に並べています。

 [ ボタン ]┃
 [ ボタン ]|
 [ ボタン ]|
 [ ボタン ]|

右端のバーをタップ&フリックすることで上下にスクロールできるのですが、
受付エリアが狭すぎるので、
ボタンが並んでいるエリアもフリック(ドラッグ)でスクロールさせたいです。
(ボタンはフリックには反応せず、タップを受け付ける)

どういった方法がありますか?