>>377さん障子とは障子紙の事でしょうか？
もしもガラスに紙を貼るのでしたらカタクリ粉の糊（中華料理のトロミに使う）
がお勧めです。剥がすときは熱めのお湯で濡らしてやれば簡単に剥がれますよ。
但し、トロミが感じられるほど濃くしないように、ガラス（水が滲みこまない物）以外に使わないように。