んじゃスキルは上がってるけど効果が発揮されて無いってシステムにしたら？
LV1の剣を持ったままでも剣のスキルはいくらでも上げられる。
でも攻撃力はLV1のままで上がってない、とか。

そして前もって上げておいた分は、LVの高い剣を持った時に反映される。