シェルスクリプト総合その24©5ch.net

2014/11/11(火) 00:54:03.43

シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
　bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
　FreeBSDユーザは/bin/shの正体がashなので注意。
　v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
　 http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/sh/
　 http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
　(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
　正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆーな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
　「そういうのはperl使いましょう」と回答するのはやめましょう。
　安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
前スレ
シェルスクリプト総合その23
http://peace.2ch.net/test/read.cgi/unix/1404204950/

**前スレ119** · 2015/03/11(水) 19:13:00.82

追加で申し訳ないです。hoge部はhoge1、hoge2、piyo00_piyo01など入り乱れてるのが
同じtree.txt中に混在している状況です。
数字の部分も

01_{01..07} #(実際は7行ある)、
...
04_{01..04} #(これも4行ある)

になっているブロックもあったりしてかなりヤヤコシイのですが、
[(連番になっている数字)以外のところが同じ行]を検出して数字を{}でまとめたい感じです。
3000行あって手作業は泣きそうなので、エレガントな方法をご教授いただければ幸いです。
{01..04}_{01..07}とする必要は無いです。
よろしくお願いします。

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 19:16:18.16

そういうのはシェルで書きたくないな

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 19:54:30.56

とりあえずソートしようぜ

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 20:19:19.48

>>396
何で書くの（´・ω・｀）？

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 20:27:02.77

perlでもrubyでもpythonでも好きなのでいいよ

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 20:48:55.55

>>394,395
ご自分が言っているように、まず
>[(連番になっている数字)以外のところが同じ行]を検出して
これをする。たとえば次のように
sed -e 's/_[0-9][0-9]_/_%%_/' tree.txt | sort | uniq
これで「連番になっている数字以外のところが同じ行」をパターン化できる
そしたら、そのそれぞれのパターンで grep tree.txt して、sort -n し、
head -n 1 と tail -n 1 で連番の最初と最後の値を切り出す

こんな感じで行けないかな

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 20:58:26.70

なんのアイデアもなくすまんが、連番かどうか見るのがめんどくさそうですね

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 23:14:35.24

すまん
問題が全然理解出来ない
誰か問題を解説してくれ

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 23:20:28.51

もともとは韓国領だったが、
日本の植民地支配から、
日本が勝手に領有権を主張しだした。
現在は国際的にも韓国領と認識されている。

**名無しさん＠お腹いっぱい。** · 2015/03/11(水) 23:54:15.14

北朝鮮のことか。

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 00:03:26.06

理解できないなら無理に答えようとしなくていい

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 01:56:20.20

独島は韓国領だよ。
やつらの主張の誤りは、独島＝竹島だと言張ってるところ。
独島は竹島だとは別の島だよ。

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 02:02:58.54

石島とか言ってたソビエトみたいな島の事？

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 02:46:00.10

>>402
Bashのブレース展開の逆がやりたいってことかと

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 03:03:37.86

perlのモジュールで
http://search.cpan.org/~vvu/Compress-BraceExpansion-0.1.7/lib/Compress/BraceExpansion.pm
てのがあった
このままじゃ使いものにならんけどね

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 16:01:30.66

ちょっとお知恵を拝借したい
テキストファイルを検索して見つけた行数を取得したいときって
grep -nで行数出力させて取得するのが一番シンプルかな？
マッチする最終行にしたい場合はtailと組み合わせてさ

ちなみにシェル知らなかったころってreadで1行ずつ読み込んで判断してたｗ

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 16:32:34.70

「一番」って難しいこと聞くね

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 18:00:51.55

>>410
grep -c

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 18:40:40.82

>>412
オマエいつも問題の意味取り違えて回答して点数もらえないタイプだろｗ

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 20:35:27.12

>>413
ん？
質問：検索して見つけた行数を取得したい
cオプション：検索条件にマッチした行数を表示する

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 20:36:26.22

>>413
あ、わかった
質問は行番号のことを行数といっているのね

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 20:36:37.62

>>414
まだわかってないのか…重症？

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 21:26:36.04

ちょっとwc

**名無しさん＠お腹いっぱい。** · 2015/03/12(木) 22:07:04.23

>>417
オプションなしだと複数返すコマンドだよね

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 00:23:15.74

行数と行番号じゃ、意味が違うな。
日本語に不自由してるのぅ

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 01:03:30.38

grep -nで出力されるのは行数ではないね

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 01:16:54.86

なんかgrep -c言ってる人がバカにされてるけど
>grep -nで行数出力させて取得するのが一番シンプルかな？
>マッチする最終行にしたい場合はtailと組み合わせてさ
これから察するに、行数と書いてはいるが、実際は行数じゃなくて行番号のこと言ってるんじゃないの？
マッチした行数が知りたいなら最終行の話なんて出てこないだろ

つまり本当にバカなのは>>416と推測
まぁ質問主から続きがなければ有耶無耶だが

**421** · 2015/03/13(金) 01:17:57.58

俺何言ってんだ？
すまん眠かったってことで何も見なかったことにしてくれ……死ぬ……

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 04:43:04.00

行数、直訳すると line number

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 07:28:39.51

line countじゃないの？

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 07:40:15.74

直訳、と言ってるだろ。

natural number = 自然数
complex number = 複素数
number = 数

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 08:04:07.16

>number = 数

ちがう。

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 08:20:54.53

違うの知ってて言ってんでしょ

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 11:04:35.04

順序数？

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 13:12:27.06

行番号を行数と呼ぶ人がいるとして、その人は行数を何と呼ぶのでしょうかね。行の数？

**名無しさん＠お腹いっぱい。** · 2015/03/13(金) 17:11:36.57

行回数

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 01:06:12.05

行数はnumber of linesだろ
Fランもたいがいにせいよ

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 02:26:16.92

>>410
まあgrepでいいと思う

grep -n regexp FILE | tail -n1 | cut -d: -f1
awk /regexp/'{print NR}' FILE | tail -n1
sed -n /regexp/= FILE | tail -n1

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 04:57:44.74

>>431
行数は line count (だからこそ grep -c )

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 05:17:25.87

count number of lines じゃね
てかどーでもいいよ
行数にしろ行番号にしろ質問者が具体例を明示してる時点で誤解しようがないだろ
早がってんしたエスパースキルゼロのうっかりさんが
早漏の言い訳をぐだぐだぐだぐだぐだぐだぐだぐだぐだぐだ
くだらねー

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 05:44:10.73

それは「行数を数えろ」だろ
中卒もたいがいにしとけ

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 07:03:54.77

>>435
countは動詞だけじゃなく名詞にもなるんだよ、知らなかった？

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 08:50:28.21

へー

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 18:41:01.09

>>436
名詞が連続してるが、それはどう言い訳するんだ？

**名無しさん＠お腹いっぱい。** · 2015/03/14(土) 21:16:03.47

http://www.gnu.org/software/grep/manual/grep.html#General-Output-Control
-c
--count
Suppress normal output; instead print a count of matching lines for each input file. With the -v (--invert-match) option, count non-matching lines. (-c is specified by POSIX.)

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 00:27:31.56

一行の中に、
bbbbaaa124iiiiiccccaaaa456lllllddddaaa789と書いてあった場合に、
特定の文字列の後に続いている数字を、スペース空けて抜き出す書き方はないでしょうか
うえの場合だとaaaの後にあるものを抜き出すように、124 456 789のような・・
素人質問ですいませんがよろしくお願いします

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 01:12:54.15

GNU grep が使えるなら

$ echo "bbbbaaa124iiiiiccccaaaa456lllllddddaaa789" | grep -Po '(?!aaa)[[:digit:]]+' | tr '\n' ' '

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 02:09:05.45

>>441
できました！
使わせていただきます。ご親切にありがとうございました。

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 03:20:18.84

追加で質問したいのですが、
上の例でbbbbaaa124iiiiicccc222aaaa456lllllddddaaa789とあった場合に、
aaaの直後でない222は省いて124 456 789だけ方法はないでしょうか
何度もすいません

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 03:27:09.47

grep -Po '(?<=aaa)\d+'

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 03:50:51.90

>>444
完璧にできました！
この時間に回答いただけるとは思いませんでした。
大変助かりました。ありがとうございました。

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 13:29:40.91

何度もすいません
上の例で、bbbbaaa0.24iiiiicccc2.22aaaa456lllllddddaaa7.89　など
小数点も含む数字が混じっている場合に、同様の条件で0.24 456 7.9を抜き出す方法はないでしょうか
あまりにも聞きすぎなので最後にしようと思います。

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 14:11:57.45

こうかなぁ…

grep -Po '(?<=aaa)\d+(\.\d+)?

でもこれだと、".01" とかにはマッチしないけどね。
それと、"1.2.3" なんて文字列があると、"1.2" にマッチしちゃう。

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 14:12:54.78

ちったぁ自分で考えな
過去2回の答えがなぜそうなるのかを考えれば応用でいけるはずだ

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 14:15:07.46

grep -o 'aaa[0-9\.][0-9\.]' | tr '\n' ' '

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 14:16:19.36

ミス
grep -o 'aaa[0-9\.][0-9\.]*' | sed 's/aaa//g' | tr '\n' ' '

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 14:37:30.13

>>447

grep -Po '(?<=aaa)\d+(\.\d+)?(?=[^\d.]|$)'

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 14:52:31.67

>>447
>>449
>>450
再度ありがとうございました。
私のファイルのケースですと450さんのやり方で完全にできました！
大変助かりましたし、勉強になりました。ありがとうございました。

>>448
本当そうしようと思います。
それ以前にgrepやsedは簡単な文字抜き出しぐらいにしか使ったことがなかったのですが、
こんなに便利だとは驚きました。学習して次は自分で解決できるようにしたいと思います

**448** · 2015/03/15(日) 14:55:28.70

これは私見だが
grepの-PはPerlの正規表現として扱うためのオプションだ
Perlを知ってるなら問題ないが、知らないなら>>450のが多分勉強対象としては正しい

**名無しさん＠お腹いっぱい。** · 2015/03/15(日) 15:09:05.03

>>451
投稿した後でレス確認しました。すいません。
こちらのやり方でもできました！ありがとうございました。
書き方の意味を勉強してみたいと思います。
>>453
ありがとうございます。perlも知らないので、
教えていただいたオプションの意味も含めて調べてみようと思います。

**名無しさん＠お腹いっぱい。** · 2015/03/25(水) 06:56:05.87

専用コマンド使わずに実用的な強度の暗号復号フィルタとか誰か書ける？

**名無しさん＠お腹いっぱい。** · 2015/03/25(水) 12:51:41.84

>>455
専用コマンドってのは、gpg とか openssl みたいなのを指してるの？
python とか perl とかを使っていいのならライブラリ次第で何とでもなりそうだけど、
それも NG なのかな？

**名無しさん＠お腹いっぱい。** · 2015/03/25(水) 15:07:14.94

rot13でよければ
tr A-Za-z N-ZA-Mn-za-m

**名無しさん＠お腹いっぱい。** · 2015/03/25(水) 18:11:12.12

それはさすがに「実用的な強度」とは言えないのでは……

**名無しさん＠お腹いっぱい。** · 2015/03/27(金) 22:26:36.44

会社でシェルスクリプト(awkやsed)いじる必要があるんですが
何かおすすめの本ないですか？

**名無しさん＠お腹いっぱい。** · 2015/03/28(土) 00:47:40.73

ttp://www.goggle.co.jp/

**名無しさん＠お腹いっぱい。** · 2015/03/28(土) 11:31:55.66

後ろからn文字目のみを削除する方法ってある？

1234567890
なら
123456780

12345
なら
1235

になるような。

**名無しさん＠お腹いっぱい。** · 2015/03/28(土) 14:36:27.39

sed -e 's/.$.\{n-1\}$$/\1/'
後ろから2文字目なら
echo 12345 | sed -e 's/.$.\{1\}$$/\1/'
1235

**名無しさん＠お腹いっぱい。** · 2015/03/28(土) 15:15:24.11

>>456
LL言語呼び出すにしても拡張ライブラリの専用コマンドに依存するのはNGじゃない？
nkfでrot13読むのは専用コマンドとは言えない気がするけど>>458だよなあ。

バイナリ法辺りを実装すればとりあえずなんとかなるんだろうか？

**名無しさん＠お腹いっぱい。** · 2015/03/28(土) 15:18:54.26

>>461
rev, cut -c, head -c, tail -c などでいけるのでは？
$ echo 12345 | rev | cut -c1,3- | rev
1235
$ echo 1234567890 | rev | cut -c1,3- | rev
123456780

**名無しさん＠お腹いっぱい。** · 2015/03/29(日) 05:16:26.01

>>461
＞後ろからn文字目のみを削除する方法ってある？

a=1234567890; echo "${a%??}${a#?????????}"

**名無しさん＠お腹いっぱい。** · 2015/03/29(日) 08:10:35.43

>>465
それ、n文字目と言うのが $n 変数に入ってる場合のこと聞いてるんでは？固定数値ならいろいろ方法あるよ。

**名無しさん＠お腹いっぱい。** · 2015/03/29(日) 13:30:23.41

>>466
可変でも同じことはできるけど。

a=1234567890; n=4; f(){ r=$1; while [ ${#r} != $2 ]; do eval r=\${r$3?}; done; echo $r; }; echo $(f $a $((${#a} - $n)) %)$(f $a $(($n - 1)) \#);

**名無しさん＠お腹いっぱい。** · 2015/03/29(日) 13:51:13.01

もっとエレガントな方法がいいなぁ

**名無しさん＠お腹いっぱい。** · 2015/03/29(日) 14:10:10.11

467が他の回答に勝っている点って何があるのかなあ

**名無しさん＠お腹いっぱい。** · 2015/03/29(日) 14:39:04.14

bash + GNU coreutils の cut コマンド限定
範囲チェックはしていない

ncut () {
declare str="$1"
declare -i idx="$2"
declare -i len=$(expr length "$str")
echo $str | cut --complement -b$((len - idx + 1))
}

$ ncut 1234567890 2
123456780

$ ncut 12345 2
ncut 12345 2

**名無しさん＠お腹いっぱい。** · 2015/03/29(日) 14:40:32.78

>>470
おっと、s/delcare/local/ でお願い

**名無しさん＠お腹いっぱい。** · 2015/04/06(月) 20:37:17.61

$ N=1; echo 1234567890 | rev | sed 's/$.\{'"$((N-1))"'\}$./\1/' | rev

**名無しさん＠お腹いっぱい。** · 2015/04/06(月) 23:05:32.98

xyzあいうえおabc
xyzかきくけこabc

というファイルがあったときに
あいうえお
かきくけこ
と抜き出す方法にはどうすればよいでしょうか
grepなどを使うとおもったのですがうまくいきません。
よろしければご教示おねがいします

**名無しさん＠お腹いっぱい。** · 2015/04/07(火) 01:08:35.80

ファイル名変更じゃ無くて抜き出しなら
lsのオプション弄ってパイプでsedに繋げばいい

変更ならrename使おう

**名無しさん＠お腹いっぱい。** · 2015/04/07(火) 01:19:37.06

sed 's/xyz$.*$abc/\1/g'

**名無しさん＠お腹いっぱい。** · 2015/04/07(火) 23:44:39.59

例えば、
親ディレクトリ
/小ディレクトリA/photo/
/小ディレクトリB/photo/
/小ディレクトリC/photo/
みたいなディレクトリ構造があった時photo3つをpictureに
変更するにはどうすればよいのでしょうか
for文にmv入れ込めばできると思ったのですができませんでした
初歩的な質もう申し訳ありませんがよろしくお願いします。

**名無しさん＠お腹いっぱい。** · 2015/04/07(火) 23:56:55.05

最後にスラッシュつけなきゃできると思うが

**名無しさん＠お腹いっぱい。** · 2015/04/08(水) 00:23:18.58

for i in *; do cd $i; mv photo picture; done
なんとか自己解決しましたそして>>477有難う

**名無しさん＠お腹いっぱい。** · 2015/04/08(水) 00:30:06.79

って違う
for i in *; do cd $i; mv photo picture; cd ..;done
こうだ！！一つしか変わってなかったぜ

**名無しさん＠お腹いっぱい。** · 2015/04/08(水) 05:44:31.48

cdが無駄です。

for i in *; do mv "$i"/photo "$i"/picture; done

ディレクトリ名等にスペースが含まれていてもいいように $i は "$i" としておく。

**名無しさん＠お腹いっぱい。** · 2015/04/09(木) 06:55:16.58

サブシェルとすればいいだけじゃね？

**名無しさん＠お腹いっぱい。** · 2015/04/09(木) 08:37:12.98

サブシェルが無駄です。

**名無しさん＠お腹いっぱい。** · 2015/04/09(木) 19:49:27.51

効率求めてshellなんか使っていない。

**名無しさん＠お腹いっぱい。** · 2015/04/09(木) 22:21:14.40

その返しは馬鹿っぽいと思います

**名無しさん＠お腹いっぱい。** · 2015/04/09(木) 23:52:38.50

>>476
http://x68000.q-e-d.net/~68user/unix/pickup?rename
util-linuxのrenameコマンドの場合
rename -v photo picture */photo

Debian系だと正規表現指定、できるかは不明
https://wiki.ubuntulinux.jp/UbuntuTips/FileHandling/RenameCommand

FreeBSDだとsysutils/renameで正規表現指定、できるかは不明
http://www.freshports.org/sysutils/rename/

**名無しさん＠お腹いっぱい。** · 2015/04/15(水) 08:31:50.31

$> TIME="2015/04/15 08:25:16"

$> printf ${TIME:5:11}
04/15

$> echo ${TIME:5:11}
04/15 08:25

$> printf "${TIME:5:11}"
04/15 08:25

罠だ、はまった。。。

**名無しさん＠お腹いっぱい。** · 2015/04/15(水) 08:45:36.46

何が罠なの？

シェル変数の展開時には " " でかこんで "${HOGE...}" にするのが基本。

**名無しさん＠お腹いっぱい。** · 2015/04/15(水) 08:48:00.87

最初から、
date '+%m/%d %H:%M'
にした方がいいのでは？

**名無しさん＠お腹いっぱい。** · 2015/04/15(水) 08:48:10.66

>>486
$ printf "${TIME:5:11}"
04/15 08:25

$ printf "%s %s\n" ${TIME:5:11}
04/15 08:25

**名無しさん＠お腹いっぱい。** · 2015/04/15(水) 09:14:12.79

$ TIME="2015/04/15 08:25:16"
$ printf ${TIME:5:11}
04/15
$ /usr/bin/printf ${TIME:5:11}
04/15/usr/bin/printf: warning: ignoring excess arguments, starting with `08:25'
$ type printf
printf is a shell builtin

**名無しさん＠お腹いっぱい。** · 2015/04/15(水) 13:25:09.88

$ TIME="2015/04/15 13:30:16"
$ printf ${TIME:5:11}
04/15

$ IFS="wanada"
$ printf ${TIME:5:11}
04/15 13:30

**名無しさん＠お腹いっぱい。** · 2015/04/15(水) 13:48:45.04

bash依存をやめよう

$ TIME="2015/04/15 08:25:16"
$ printf ${TIME:5:11}
sh: Bad substitution

$ IFS='/ :'
$ set $TIME
$ echo $2/$3 $4:$5
04/15 08:25

**名無しさん＠お腹いっぱい。** · 2015/04/16(木) 23:26:24.70

GNU date
$ TIME="2015/04/15 08:25:16"
$ date '+%m/%d %H:%M' --date="${TIME}"
04/15 08:25

**名無しさん＠お腹いっぱい。** · 2015/04/30(木) 23:24:48.53

今月のsoftware designはgrepsedawk入門で面白かったな

シェルスクリプト総合 その24©5ch.net

シェルスクリプト総合その24©5ch.net