とりあえず一枚目、
上や下に移動した後に同じ移動方向の変数入れてるけど、横要素にすればキーから手を離してるときは上下しないようになるのでは?