ストリーム処理の途中でnkfをかませば全て解決。何の問題もない。