シェルスクリプト総合その7

**ミスターシェル** · 2006/09/07(木) 13:00:11

シェルスクリプトの総合スレです。
スクリプトのお勉強・自慢・腕試しなどにどうぞ。
まずは注意点、リンク、地鎮祭など(>>1-6くらい)をご覧ください。

□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
　bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashなので特に注意。
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルスクリプトのことをシェルってゆーな
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)

□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　RubyやPerlの方が適した仕事には素直にそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 22:17:15

「ごっそり抜い」たはずのJKLは
なぜ残っているのか?

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 22:24:14

>>507
だからぁ、察してやれよ、MNOの書き間違いだろ。

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 22:27:07

これでいいか？ gawk だが

$ cat minus.awk
#!/usr/bin/gawk -f

ARGIND == 1 {
minus[ $0 ] = sprintf("hogehoge%d",FNR)
next
}
$0 in minus {
print minus[ $0 ]
next
}
{
print
}
$ gawk -f minus.awk (抜くキーワードを書いたファイル) (抜かれる方のファイル)

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 22:37:23

すみません。改めます。
シェルスクリプトでやりたいです。

ABC
DEF
GHI
JKL
MNO

という文字列を
DEF
GHI
JKL
という部分をごっそり抜いて、
ABC
と
MNO
の間に特定の文字列を挿入して、
ABC
hogehoge1
hogehogeXX
hogeYY
MNO
としたいのですが、
何か良い案はないでしょうか？
よろしくお願いします。

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 22:43:52

>>510
↓ほれ、これでいいかい? シェルだけでやったよ。外部コマンドは使ってない。

while read line
do
case $line in
ABC|MNO) echo "$line";;
DEF) echo hogehoge1;;
GHI) echo hogehogeXX;;
JKL) echo hogeYY;;
esac
done < input_file

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 22:55:31

>>510
cat aa |sed -e '/DEF/,/JKL/c\
hogehoge1\
hogehogeXX\
hogeYY'

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 22:56:21

>>510
>>505は読んだのかｗ？

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 22:56:33

>>512
お約束のcatが無駄です。あと、シェルだけでやりたいと申されております。

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:02:26

>>510
> DEF
> GHI
> JKL
> という部分をごっそり抜いて、
これで人に通じると思ってるの? ゆとり世代?

1 ABCの次の行からMNOの前の行まで。
2 2行目から4行目まで
3 2行目から最終行-1まで
4 DEFまたはGHIまたはJKL
5 1文字目がAかM以外
6 1文字目がDまたはGまたはJ
...

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:06:31

>>510
お客様、仕様書が曖昧で作業に入れませんのでご確認をお願いいたします。
こいういうことでしょうか？

START-STRING
AAAA
BBB
CC
END-STRING

を

START-STRING
REPLACED-1
REPLACED-2
REPLACED-3
END-STRING

とする。
START-STRINGとEND-STRINGに囲まれた複数行を置換するんでしょ？
読み取れないのは、AAAA,BBB,CCの部分は何でも良いのか、
hogehoge1,hogehogeXX,hogeYYの部分は固定なのか、AAAA,BBB,CCそれぞれに
対応させて置換するのか。

**510** · 2006/12/02(土) 23:06:52

1 ABCの次の行からMNOの前の行まで。
ですので、
512
でほぼ解決です。
ありがとうございました。
説明がわかりにくくてご迷惑をお掛けしました。
また出直します。

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:09:28

>>517 池沼?

>>512は
DEFとJKLではさまれている行だろうが、どこが
> ABCの次の行からMNOの前の行まで。
なんだよ。

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:23:28

>>518
「ほぼ」って言ってるから良いんじゃない？
sed -e '/ABC/,/MNO/c¥
ABC¥
hogehoge1¥
hogehogeXX¥
hogeYY¥
MNO'
程度の修正は誤差であるというくらい理解したんじゃないかna

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:32:03

for (i=0; i<10; i++) ; do
echo "$i"
done
Bourne Shellでも動きますか?

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:32:35

むりでーす。

**520** · 2006/12/02(土) 23:32:52

間違えた

for ((i=0; i<10; i++)) ; do
echo "$i"
done
Bourne Shellでも動きますか?

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:38:40

>>522 はBourne shでは使えない。

for i in 1 2 3 4 5 6 7 8 9; do
echo "$i"
done

が最もポータブル。
seqやjotはあえて使わない。

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:52:40

問題の出し方と内容がム板と犬板のシェルスクリプトスレに現れた奴に似てる

**名無しさん＠お腹いっぱい。** · 2006/12/02(土) 23:57:42

>>523
exprくらいは使ってもいいじゃね？

**名無しさん＠お腹いっぱい。** · 2006/12/05(火) 17:00:20

aaa='"AAA AAA" BBB'
for n in $aaa; do
echo "$n"
done
だと
"AAA
AAA"
BBB

となるのですが、これを
"AAA AAA"
BBB
とするにはどうすればいいのでしょうか？

**名無しさん＠お腹いっぱい。** · 2006/12/05(火) 17:12:42

>>526
for n in "$aaa"

常に "$hoge" みたいに " " を付ける癖を付けろ。

**名無しさん＠お腹いっぱい。** · 2006/12/05(火) 17:13:44

>>527
欲嫁。それだと逆に全部つながっちゃうが、、

**名無しさん＠お腹いっぱい。** · 2006/12/05(火) 22:58:15

>>526
ゴリ押し

aaa='"AAA AAA" BBB'
while test "x$aaa" != x
do
　case $aaa in
　\"*\"\ *)
　　echo "$aaa" | sed 's,^$"[^"]*"$.*,\1,'
　　aaa=`echo "$aaa" | sed 's,^"[^"]*" *,,'` ;;
　*\ *)
　　echo "$aaa" | sed 's, .*,,'
　　aaa=`echo "$aaa" | sed 's,[^ ]* *,,'` ;;
　*)
　　echo "$aaa"; break ;;
　esac
done

**名無しさん＠お腹いっぱい。** · 2006/12/05(火) 23:20:23

" " ではさんだやつは " " も消しちゃいかんという仕様がなぁ

**526** · 2006/12/06(水) 13:55:07

う、そんなにややこしいことなんですか？
精進します

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 16:54:03

変数に入っている最初の１文字だけを取り出したいんですけど、なにか良い方法は無いでしょうか？

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 17:48:45

>>532
foo=$(echo $bar | sed -e 's!$^.$.*!\1!')

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 18:48:23

>>532
${var%%${var#?}}

**532** · 2006/12/06(水) 20:52:29

>>533, >>534
ありがとうございます。

自分なりに無い知恵を絞って出した答えは
foo=`perl -e "print substr('$var', 0, 1)"`
だったんですが、>>534には感動しました。

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 21:02:54

>>534 は Bourne Shell で動かないからポータブルじゃない。
↓がお勧め。

printf '%c\n' "$var"

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 21:42:29

>>532
echo ${var:0:1}

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 21:48:39

>>537
bash/ksh依存乙。

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 21:54:07

これならかなりクラシックな環境でも可
foo=`expr "$bar" : '^$.$'`

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 22:49:45

うぉー、さらに増えてる。
みなさん、ありがとうございます。

printfが存在を知ったり、exprの使い方がわかったりと、かなり勉強になりました。
ただ、>>539の正規表現は'$.$'`でいいみたいです。
^は正規表現の意味を持っていないので無視される。みたいなワーニングがでました。

**名無しさん＠お腹いっぱい。** · 2006/12/06(水) 23:48:50

echo "$var" | cut -c1 は？

**名無しさん＠お腹いっぱい。** · 2006/12/07(木) 00:01:29

grep hoge * | nkf -e > out というコマンドを
xargs を使った形に書き換えたいんですが、どう書けばいいんでしょうか？

**名無しさん＠お腹いっぱい。** · 2006/12/07(木) 00:25:47

find * -print | xargs grep hoge | nkf -e > out？
ていうか grep とか grep -r で済むなら xargs の出番なさそう。

**542** · 2006/12/07(木) 01:04:05

あ、すいません。説明を間違えました。
ファイルの文字コードがそれぞれ違う可能性があるから、
for i in *; do grep hoge $i |nkf -e >> out; done
と同じことをしたいのでした。
この場合も for の行で外部コマンドを呼んでいないから
ARG_MAX の制限はないようですね。
xargs で起動するコマンドの中にパイプやリダイレクトを
入れることはできるか、と聞きたかったのでした。

**名無しさん＠お腹いっぱい。** · 2006/12/07(木) 02:08:55

一応

　find * ... -print | xargs -n 1 sh -c 'grep hoge $0 | nkf -e' > out

とかでもできるけど、

　find * ... -print | xargs nkf -e | grep hoge > out

の方がエレガントなような。でも、 file: line 形式で grep 結果を
出したいなら、ついでに * 展開で溢れるケースも考慮して

　find . ... -print | while read i; do grep hoge $i | nkf -e; done > out

しかし ARG_MAX の心配をするほどファイルがあるなら

　find . ... -print | xargs perl -MJcode -lne 'print jcode("$ARGV: $_")->euc if /hoge/' > out

がちょっと長いけど速そう。

**名無しさん＠お腹いっぱい。** · 2006/12/07(木) 09:27:20

とりあえずお約束として
find -print0
xargs -0
にしる、と突っ込んでおくべきなのだろうか

**名無しさん＠お腹いっぱい。** · 2006/12/07(木) 13:53:37

お約束だけど GNU のは入れられなかったりとか
仕様バグがどうこうとか。

**名無しさん＠お腹いっぱい。** · 2006/12/12(火) 15:03:35

PPPoA で接続してるんですが、モデムのログがほとんど残してもらえず(容量少い)
不安定な回線なのにどの程度不安定なのか把握できず困ってます
切断されてもすぐ再接続されるわけですが、これを記録しておきたいと思います
ping 撃ちまくるのはわかりますが、切断された時と再接続された時を記録するには
どんなスクリプト書けばいいですか？

**名無しさん＠お腹いっぱい。** · 2006/12/12(火) 19:53:11

1.txt
↓内容
1
11
111

cat 1.txt | grep 11
とやると
11と111の２つがﾋｯﾄしてしまいます(^_^;)
11の行だけを抜き出す方法はないですかね？

**名無しさん＠お腹いっぱい。** · 2006/12/12(火) 20:14:17

>>549
grep -w 11

**名無しさん＠お腹いっぱい。** · 2006/12/12(火) 20:47:34

>>549
catが無駄です、のお約束。

**名無しさん＠お腹いっぱい。** · 2006/12/12(火) 21:11:23

>>551
あんたマイナーになってるよ。

**名無しさん＠お腹いっぱい。** · 2006/12/12(火) 22:06:51

>>549
grep -x 11 1.txt

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 10:08:05

>>551　かっこいいから俺も会社で真似して渋く言ってみます

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 10:26:21

zcatとかgzcatとかbzcatとかに置き換えるときに、
修正する文字数が少なくなるという、多大なメリットがある。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 10:30:43

フィルタだってことがわかりやすいしな。
別に咎めるほどのことではないと思う。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 11:39:14

>>555
本気で言ってんのか？
>>549のような使い捨てのワンライナーなら「修正の手間」も糞もねぇだろ。

元スクリプトが
script
なら、
zcat foo.gz | script
とすりゃいいだけだ。一行の修正も要らないし、zcat決めうちにするより
scriptの汎用性が維持される。
こっちのがツールボックスアプローチとして正しいわな。

必要も無いcatを使ってるスクリプトを見ると、俺は不安になるね。
書き手に変な癖がついてるのか、リダイレクションすら理解して無いのか、
品質上に問題があるんじゃないのかとか。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 11:53:26

>>557
使い捨てならわざわざリダイレクトなり引き数なりに
直す必要もないじゃん。
script の汎用性の話は意味がわからん。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 12:05:56

使い捨てなら cat のムダくらい気にせんでもいいやんけ。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 12:11:06

>>558, 559
使い捨てと言いつつ、
grep -w 11 1.txt
ですむものを、
cat 1.txt | grep -w 11
と書きたがる意図が分からんのだが。

そんなにcatとタイプして無駄にプロセスを一個増やすのが好きか？
変な癖を正当化してるだけじゃないか？

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 12:18:25

>>560
おれが書いたわけじゃないから
おれも意図はわからんな。

プロセスの減らし方あれこれ考えるより
さっさとスクリプト書きあげて
仕事終わらせちゃった方がいいじゃん。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 12:22:26

>>561
こんなことで「あれこれ考え」なきゃいけない時点でバカ。
判って無い証拠。
cat file cmd
が動作するなら
cmd <file
が確実に動作するんだから。
後者は無駄なプロセスが不要でタイプ量も少ない。

大体、タイプ量増えるのに、「さっさと仕事終わらせる」も糞もないだろ。

**562** · 2006/12/13(水) 12:23:13

すまん
cat file | cmd
な。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 21:39:54

cat 1.txt | grep -w 11 は中身確かめて加工に合っている。

**チラシの裏すまそ** · 2006/12/13(水) 22:01:56

漏れは同じファイルに対して何回かgrepしたいときに

cat file | grep KEYWORD1
　↓
カーソルキーの↑を押して前回のコマンドを表示し、
Deleteキー連打して、新しいキーワードを打ち込んで
　↓
cat file | grep KEYWORD2
　↓
以下、繰り返し

こんな感じだけどね。
シェルスクリプトの中では使わんけど。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 22:06:27

>>565
単にコマンドラインの右端の文字を変更しやすいという意味なら、

$ < file grep KEYWORD1
$ < file grep KEYWORD2

↑みたいにやれば良い。< fileの部分が左に来てもいいんだよ。パイプは使わない。

**565** · 2006/12/13(水) 22:19:02

>>566
うぉ、そんな方法があるとは知らなかった。(@_@)
ありがとん。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 22:29:23

^1^2

とかしないの?

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 22:42:36

cshつかわんから。

**名無しさん＠お腹いっぱい。** · 2006/12/13(水) 23:42:18

>>569
bashでもzshでも、もちろんcshでも、^1^2とかできるはずだけど。
kshは知らんが。

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 01:39:01

使える環境でも、^stop^start　位しか使わんな。
ヒットした最初の部分しか置き換わらんのが意外に使いにくいしくつう。

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 02:16:19

ディレクトリーを1～100まで一気に作りたいのですが
1 2 3....でなく
001 002 003...としたいのですが

d=0
mkdir 0$d
で$dに１つづ加算すると

1　2　3…となってしまいます　orz
ヒントなんぞありましたら
おにぃちゃんおしえて！　まぅまぅ

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 02:20:03

>>572　まちがえたぁ

d=0
mkdir 00$d
で$dに１つづ加算すると

001 002…009 になるものの　10を超えると
0010になってしまうので

010…099 100 となれば幸いです

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 02:31:55

perl -e 'for ("001".."100") { mkdir $_; }'

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 02:37:10

zsh -c 'mkdir {001..100}'

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 07:34:49

>>572
mkdir `seq -w 1 100`

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 11:29:48

>>574-576

おにいちゃん！ありがと！まぅまぅ
perl,zshも勉強しますorz

winamp のストリームで
bpsやってるよ！　まぅまぅ

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 14:03:12

バトルプログラマーシラセ・・・・・bpsね

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 15:23:17

あるプロセスが起動しているかどうかps|grepで確認するにはどうしたらいいですか？
ps ax|grep XXX|wc -l
で確認すると、grep自身が入ったり入らなかったりします。

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 15:27:43

>>579
pgrep XXX

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 15:45:13

>>580
ありがとうございます

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 16:10:56

>>579
grep -v grepしとけ

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 16:22:18

>>582
プロセス名が logreport だったりするとだめ。

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 17:02:27

>>583
やるな。
grep [X]XX
なら？

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 17:54:13

ボーンシェルってシェル関数使えるって思っても
いいのでしょうか？
シゥル関数使えないボーンシェルもありますか？

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 18:02:02

まゆ毛ボーンシェル

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 18:07:39

「ボーン shell」って何ですか?
Bourne shellなら知ってますが、
それとは違うシェルのことですよね?

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 18:19:27

マット・デイモンのやつだろ

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 19:04:19

シゥル関数ktkr

**名無しさん＠お腹いっぱい。** · 2006/12/14(木) 23:41:00

シゥル関数、微妙に発音しにくい。

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 00:34:46

シゥルスクリプト

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 00:36:26

はだかーのまっまっでベイベ
おどろーよシゥルダンス

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 01:07:42

>>592

どう見ても米米クラブです。
本当にありがとうございました。

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 12:41:17

スクリプトのログを過去10日間保存して、それよい古いのは削除していくという感じにしたいのですが
LogFile名
Script名_$(date +"%Y%m%d-%H%M%S")_プロセスID

助言よろしくお願いします。

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 12:50:00

>>594
プールン使うって理解でおk？

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 14:07:22

プールン？

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 14:15:37

ミキプルーン

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 14:31:11

>>594
素直にlogrotateでも使え

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 14:52:54

日付で判断出来なかったっけ？
どこかでそんなScriptを見た気がする。

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 16:29:30

ファイル名から、%Y%m%dの文字列を抜き出して、
`expr \`date "+%Y%m%d"\` - 10`と比較して、これより小さければ、そのファイルを削除する。
あとはこれを、for f in `ls Script名_*` みたいな感じでループさせればいいだろう。

**名無しさん＠お腹いっぱい。** · 2006/12/15(金) 18:05:57

今まで>>582の方法でやってたけど、>>583は盲点だった
多分そんなプロセス名自分は使わないだろうけど勉強になるな

**名無しさん＠お腹いっぱい。** · 2006/12/16(土) 00:44:15

>>594
findで作成日が10日以前のログファイルを見つけて消すようにしては？

**名無しさん＠お腹いっぱい。** · 2006/12/16(土) 10:07:15

>>602
この前その方法でやったけど何故か処理重かった・・・
なのでオレは>>600に近い方法でやったよ。
>600のそのままだとうまく動かないと思われ

**名無しさん＠お腹いっぱい。** · 2006/12/16(土) 10:26:00

>>603
どの部分が重いのか、今後の為にも確認した方が良いと思うぞ。

**名無しさん＠お腹いっぱい。** · 2006/12/16(土) 10:33:12

>>602
ほとんどの場合はそれでいいんだろうけどな、特に削除の場合は。

**名無しさん＠お腹いっぱい。** · 2006/12/16(土) 15:11:30

作成する時に date % 10 でファイル名決めれば？
今回は 10 だけど、7 の場合は date +%w でできてもっと単純。

**名無しさん＠お腹いっぱい。** · 2006/12/16(土) 18:26:39

兄者！たすけておくんなせぇ

バックアップを1日3回取りたいのですが
日付毎のディレクトリを作って

mkdir /bak/`date +%d%m`

と、ここまではいいのですが2回目に、このスクリプトが動くと
もうディレクトリあるぞ( ﾟДﾟ)ｺﾞﾙｧ!!とエラーがでます（たいしたことはないのですが）

ディレクトリー作成とバックアップ用のスクリプトは別けたほうが良いでしょうか
if で　あるからもう作らない　次進めとやると
速度落ちますよね？
なんかいい知恵ないでしょうか？

シェルスクリプト総合 その7

シェルスクリプト総合その7