霊吸いの渓谷を抜けて、地図を上に行けば砦です。
渓谷出口の下(南)に女盗賊の門があるので、スイッチで開けとけばＯＫ