空ディレクトリが存在しないのであれば
rmdirはどのディレクトリも削除できないのでは?