自分で書式を
(setq display-time-string-forms '(24-hours ":" minutes))
とか設定すれば消せます．

バッファ名の左側に表示ってのは global-mode-string ではなく
mode-line-format をいじらねばならんのでめんどうな予感．