:syntax off
で速くなるならruby用の構文ハイライトの正規表現パースで時間掛かってるんじゃね。
rubyあんまり使わないから具体的にどれかは知らないが。
あとは気休め程度かもだけど、
:set ttyfast
:set lazyredraw
とか。