rmdir 'hogehoge 1'
rmdir hogehoge\ 1

つーか rmdir h まで打って TAB 補完でよくね。