シェルスクリプト総合その24©5ch.net

2014/11/11(火) 00:54:03.43

シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
　bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
　FreeBSDユーザは/bin/shの正体がashなので注意。
　v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
　 http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/sh/
　 http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
　(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
　正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆーな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
　「そういうのはperl使いましょう」と回答するのはやめましょう。
　安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
前スレ
シェルスクリプト総合その23
http://peace.2ch.net/test/read.cgi/unix/1404204950/

**名無しさん＠お腹いっぱい。** · 2015/01/15(木) 18:30:18.23

GNU awk ならこんなのも

awk -v SEARCH="$SEARCH" 'BEGIN{RF="---"}/SEARCH/' $save_to

**名無しさん＠お腹いっぱい。** · 2015/01/20(火) 01:40:59.45

こんな雑誌があることを初めて知った。
なんと月刊で20号以上出ているということにも驚いた。

シェルスクリプトマガジン vol.21
http://www.amazon.co.jp/dp/4904807154/
https://www.usp-lab.com/pub.magazine.html

**名無しさん＠お腹いっぱい。** · 2015/01/20(火) 05:22:18.17

その雑誌の半分はシェルスクリプト関係ない内容だから相当ネタがないんだろなって思った

**名無しさん＠お腹いっぱい。** · 2015/01/21(水) 01:45:14.76

ツールドフランスの実況が森の景色の解説になってるようなもんか

**名無しさん＠お腹いっぱい。** · 2015/01/22(木) 16:29:19.37

コマンドラインから手入力するとちゃんと動くスクリプトが、cronからだと動かない。
数日悩んだ結果。。。原因はLANGだった

**名無しさん＠お腹いっぱい。** · 2015/01/22(木) 16:32:53.58

ルンゲの罠

**名無しさん＠お腹いっぱい。** · 2015/01/22(木) 16:48:29.41

>>230
まれによくある。

スクリプトの先頭付近でLANGを設定しちゃうことも多いんだけど、Unix的でクールな
ポータビリティのある手法を紹介してくれる偉い人が出てくるのを正座して待ちたい。

**名無しさん＠お腹いっぱい。** · 2015/01/22(木) 17:14:56.12

LANG=C

**名無しさん＠お腹いっぱい。** · 2015/01/23(金) 06:42:51.72

偉い人が
　共通したものは crontab 先頭で、タスク毎のは env NAME=VALUE COMMAND
と答えるか、もうまるっきり答えないと予想した

**名無しさん＠お腹いっぱい。** · 2015/01/23(金) 10:00:16.40

共通したものは crontab 先頭で、タスク毎のは env NAME=VALUE COMMAND

**名無しさん＠お腹いっぱい。** · 2015/01/23(金) 16:52:05.70

偉い人のコピペ北ー！
自演っぽくて、コメントしづらい輪

**名無しさん＠お腹いっぱい。** · 2015/01/23(金) 17:30:03.53

この話はここで終わりって暗に言ってるんだろう

**名無しさん＠お腹いっぱい。** · 2015/01/24(土) 10:11:24.87

LANG=C sl
的な書き方ってどこまで有効なのかな？
bashだけ？

**名無しさん＠お腹いっぱい。** · 2015/01/24(土) 10:23:49.81

>>238
bourne shell でも使える

**名無しさん＠お腹いっぱい。** · 2015/01/24(土) 15:26:45.88

配列の命名規則ってある？

**名無しさん＠お腹いっぱい。** · 2015/01/24(土) 15:41:53.70

ない

**240** · 2015/01/25(日) 04:39:03.74

みんなはどうしてる？
しっくりくる表記法がないんだけど

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 05:18:01.83

しっくりこない表記がワカラナイ

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 11:18:23.60

配列は邪教
使わないので規則などない

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 11:45:02.72

>>244
同意

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 12:36:31.55

配列って変数名に連番を入れたりして使うことかと思ってたｗ

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 13:47:36.00

>>244,245
じゃあ代わりにどうすればよいのだ?
まさかコピペ？

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 17:38:43.45

ポインタとか言い出すと見た

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 19:40:14.84

あほらし

> じゃあ代わりにどうすればよいのだ?
> ポインタとか言い出すと見た
いかにも、めんどくさそう

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 19:46:57.10

会話するネタがないんだなぁ……

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 21:21:36.60

じゃあおれからネタ
xargsコマンドが好き。無理だと思ってた処理がワンライナーになる
いっそ、powershellみたいにjsonパイプラインみたいなのがあればいいのにって思う

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 22:41:49.00

俺がよく使うのはfind ... | xargs grep　だったかな
他どんな場面で使うっけ

**名無しさん＠お腹いっぱい。** · 2015/01/25(日) 23:37:38.84

\ls -1t *.* |head -3|xargs head

**名無しさん＠お腹いっぱい。** · 2015/01/26(月) 12:06:00.33

>>235

*.*の３行が、headへの標準入力じゃなくて、引数として与えられるのか。
おもしろいなあ。

**名無しさん＠お腹いっぱい。** · 2015/01/26(月) 20:35:10.75

xargs で何か面白い事は無いかと、あれこれ考えた結果
ループになる
xargs loop で検索したら結構見つかるので
珍しくは無いんだろうが、まあ、一応

<<EOF xargs -I i sh -c 'seq 3 | xargs -I j echo i j'
foo bar
baz qux quux
corge
grault
EOF

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 02:26:05.37

xargs は並列処理でもよく使うかな
例えば find ... | xargs -P 12 -n 16 gzip とすると12プロセスがファイルの圧縮を行う

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 03:09:32.08

\nをファイル名に仕込まれて爆死する

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 06:47:01.92

find ... -print0 | xargs ... -0 ... ってしとけばええやん…

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 07:02:05.92

\0をファイル名に仕込まれて(ry

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 07:38:50.39

仕込めるんだっけ？

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 08:17:49.81

find ‥ -print0 を知らん奴もいるんだな w

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 08:20:05.07

>>260
API だと思い付かない
ディスクを直接バイナリ編集すれば可能かも

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 08:25:13.28

>>261
実装によってはないのよ

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 08:28:26.16

solarisにはまだない

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 12:18:24.66

>>263
移植すりゃいいじゃん

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 12:56:34.51

大抵は
-exec {} +
で用が足りる

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 13:01:19.27

>>262
カーネル内でもファイル名は0終端で扱ってるから無理だね
実際のサイズと異なる事でカーネルクラッシュなどまずいことが発生する可能性は
あるけど、それは普通にカーネル内バグ

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 13:29:38.19

>>265
そういう話じゃないよ

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 13:41:29.10

>>268
半分冗談だよ、いちいち気にしてたら禿げるぞ

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 13:43:51.02

冗談に見えないし、
冗談だとしても面白くないよ

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 15:15:56.23

大抵は
-exec \{\} +
とエスケープなりクォートで囲むなりするのを忘れる

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 16:27:07.47

{}をquoteしなきゃならないカタワ専用シェルって何?

**名無しさん＠お腹いっぱい。** · 2015/01/27(火) 21:10:27.07

-execはなんか怖いんだよなぁ
理由はないんだけど

**DAEMON** · 2015/01/27(火) 21:45:21.58

>>272
　シ
タッ・・(Φ　Φ+)・・・　恐らく Perl です

**DAEMON** · 2015/01/27(火) 22:02:58.78

続 >>274
　シ
タッ・・(Φ　Φ+)・・・　例えば、基礎公文で…

while (test) {
　　　　open test-file.txt(filehandle) ,
　　　　　　">test-file.pl"
　　　　print test-file.txt
　　 close test-file.txt
}

斯様な様にですか…

**名無しさん＠お腹いっぱい。** · 2015/01/28(水) 00:14:24.97

>>271
で、{}をクォートする必要があるシェルって何?

**名無しさん＠お腹いっぱい。** · 2015/01/30(金) 19:56:12.76

wait入れるsleepだが、引数が整数だけだろと思ってたら、整数じ
ゃなくてもいいというので、0.1入れてやってみたら、ほんとに動
作してるっぽい。manには何も書いておらん。つかえねーman

**名無しさん＠お腹いっぱい。** · 2015/01/30(金) 20:00:01.61

うちのsleepはGNUだけど man sleep すると info 見ろって書いてあって、info 見たら：
Historical implementations of `sleep' have required that NUMBER be
an integer, and only accepted a single argument without a suffix.
However, GNU `sleep' accepts arbitrary floating point numbers (using a
period before any fractional digits).

**名無しさん＠お腹いっぱい。** · 2015/01/30(金) 21:57:35.82

>>278

おお、サンクス

**名無しさん＠お腹いっぱい。** · 2015/01/31(土) 12:09:54.06

>>273
客先環境での操作なんかだとおおいにある
xargsなら、-pとか-tがあるので安心

**名無しさん＠お腹いっぱい。** · 2015/01/31(土) 13:19:36.31

>>280
同意が得られて異端じゃないと安心出来た
尚就職してから今まで客先環境でしか働いたことがない模様

**名無しさん＠お腹いっぱい。** · 2015/01/31(土) 17:47:20.57

こうじゃなくて
v=${v:-default}

こうでしょ
: ${w:=default}

っていうの有りますか?皆さんの、そういうの教えて下さい

**名無しさん＠お腹いっぱい。** · 2015/02/01(日) 00:46:16.74

こうじゃなくて
echo -e 'hoge\nfuga'

こうでしょ
printf 'hoge\nfuga\n'

**名無しさん＠お腹いっぱい。** · 2015/02/01(日) 00:47:04.51

俺はecho派

**名無しさん＠お腹いっぱい。** · 2015/02/01(日) 07:05:52.05

公文い公文

**名無しさん＠お腹いっぱい。** · 2015/02/01(日) 13:49:52.79

echo は -e が必要だったり不要だったりモノによってバラバラなんで printf だなぁ。
OSX の /bin/sh は bash だけど、同じ bash のはずなのに
bash -c "echo -e 'hoge\nfuga'" と sh -c "echo -e 'hoge\nfuga'" で
結果が違うとかめんどくさすぎる。

**名無しさん＠お腹いっぱい。** · 2015/02/01(日) 18:28:40.97

似た様なのだけど、

こうじゃなくて
function f () {
echo hoge hoge
}

こうでしょ
f () {
echo hoge hoge
}

**名無しさん＠お腹いっぱい。** · 2015/02/01(日) 19:10:32.63

個人的には上なんだけど
最近やってるのがjavascriptだからかな

**名無しさん＠お腹いっぱい。** · 2015/02/02(月) 10:43:19.51

変数は大文字か小文字か。
個人的には環境変数と区別するために小文字なんだけど、
社内の他の人が書いたのを見ると大文字ばっかりなんだよな。

**名無しさん＠お腹いっぱい。** · 2015/02/02(月) 12:18:06.01

いつexportしても問題が出ないような命名規則なら問題無しｗ

**名無しさん＠お腹いっぱい。** · 2015/02/02(月) 21:56:58.79

質問です。
linux mint 17.1 でコマンドの練習してるのですが、
% ls -l
だと色々ずらーっと出るんですけど、本に書いてあるとおり、
ソートコマンドを練習しようとして
% ls -l | sort +4
と打ち込んでファイルサイズで降順ソートしたかったのですが
sort: cannot read: +4: そのようなファイルやディレクトリはありません
と出てしまいます。
bashですが、シェルの種類によってはこのオプション使えないんでしょうか。
-r等は正常に動作します。

**名無しさん＠お腹いっぱい。** · 2015/02/02(月) 22:04:13.81

sort -k4
sort -k4r

**名無しさん＠お腹いっぱい。** · 2015/02/02(月) 22:34:00.27

で、できました！有り難うございます！

**名無しさん＠お腹いっぱい。** · 2015/02/03(火) 03:09:11.93

>>291-293
sort +4と同じ指定はsort -k5
たぶんls -lでファイルの所有者が全て同じで、できたと勘違いしてる
--debugオプションをつけるとわかりやすい
https://www.gnu.org/software/coreutils/manual/html_node/sort-invocation.html
> On older systems, sort supports an obsolete origin-zero syntax ‘+pos1 [-pos2]’ for specifying sort keys.
> The obsolete sequence ‘sort +a.x -b.y’ is equivalent to ‘sort -k a+1.x+1,b’ if y is ‘0’ or absent,
> otherwise it is equivalent to ‘sort -k a+1.x+1,b+1.y’.

sort +4という古いオプションの扱いはPOSIXのバージョンによるってことかな
https://www.gnu.org/software/coreutils/manual/html_node/Standards-conformance.html#Standards-conformance

**名無しさん＠お腹いっぱい。** · 2015/02/03(火) 06:48:02.67

Linux だったら ls コマンドは GNU coreutils の ls だろうから、

$ ls -l --sort=size
or
$ ls -lS

でええじゃまいか

**名無しさん＠お腹いっぱい。** · 2015/02/03(火) 08:37:05.99

（検索結果で上位に上がると期待して）日本語訳を貼り付けておきます

http://linuxjm.sourceforge.jp/info/GNU_coreutils/coreutils-ja.html
http://linuxjm.sourceforge.jp/info/GNU_coreutils/coreutils-ja_15.html#Standards-conformance

**確認不足だった orz** · 2015/02/03(火) 08:40:20.78

訂正

（検索結果で上位に上がると期待して）日本語訳を貼り付けておきます

http://linuxjm.sourceforge.jp/info/GNU_coreutils/coreutils-ja_15.html#Standards-conformance
http://linuxjm.sourceforge.jp/info/GNU_coreutils/coreutils-ja_43.html#sort-invocation

**名無しさん＠お腹いっぱい。** · 2015/02/04(水) 22:55:20.92

>>297
おお、infoの日本語訳できたんだ
man on WWWのように検索できるとさらにいいね

**名無しさん＠お腹いっぱい。** · 2015/02/08(日) 15:04:24.54

よく使うワンライナーなどはどうやって呼び出すものなんですか？
何か簡単に管理する方法がありませんかね？

**名無しさん＠お腹いっぱい。** · 2015/02/08(日) 15:06:57.37

zshならzawから
vimのUnite historyの様なgrep効くから、それで呼ぶか
編集して完成させる

**名無しさん＠お腹いっぱい。** · 2015/02/08(日) 16:40:17.45

>>300
anything.elみたいなヒストリーサーチみたいですね。
bashなのでどうしたものか。

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 09:34:08.43

>>299
aliasじゃないの？

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 10:04:38.99

自分で書いたスクリプトはいつでも、一見、間違いのないように見えるｗ

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 18:00:27.27

まったくだ（´・ω・｀）
ぼくの書いたスクリプトが動かないなんてけしからん（´・ω・｀）
シェルの方を治したまえ

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 18:21:02.80

cygwinからLinuxに移植したシェルスクリプトが,ping部分で成功しなかった

declare -A URL
URL=(
　　["Vim_part24"]="http://peace.2ch.net/test/read.cgi/unix/1413122189/";
　　["vim_part5"]="http://anago.2ch.net/test/read.cgi/software/1379912425/";
　　)

# ping for download
ping_error=0
for i in ${!URL[@]}
do
　　# ping　${URL[$i]} > /dev/null
　　ping -n 1 `echo　${URL[$i]} | awk -F"/" '/http/{print $3}'` > /dev/null
　　if [ "$?" -ne 0 ]; then
　　　　echo "${i} : can not contact ${URL[$i]}"
　　　　ping_error=1
　　fi
done

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 18:41:13.94

ping -c 1 ... にするべきじゃないの？

pingのコマンドオプションって統一されてないよなぁ

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 19:27:08.45

配列を使うのはダサいと思うのです。

#!/bin/sh
url_list='
Vim_part24 http://peace.2ch.net/test/read.cgi/unix/1413122189/
vim_part5 http://anago.2ch.net/test/read.cgi/software/1379912425/
'
ping="ping -w 3 -c 1"
echo "$url_list" | while read thr url __; do
case "$url" in
https?://*)
host=`echo $url | cut -d/ -f3`
if ! $ping $host >/dev/null; then
echo "$thr: cannot contact $url"
err=1
fi
;;
esac
done
exit $err

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 19:28:49.19

ああ、case の条件部分がおかしい。
http://*|https://*|ftp://*)
だな。

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 19:33:01.27

わざわざpingするのがわからん

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 19:34:49.22

pingしなくても wget -T でタイムアウトできるしな

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 19:39:42.45

俺んところの現場でも、ssh する前に ping するスクリプトを書いてる人がいたな。
これって、どこかに由来する文化なのかな？
(cronを「くーろん」と呼ぶみたいな？いや、これは違うかな……)

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 19:43:34.71

>>306
サンキュー
windowsのsystem32/ping.exeが呼ばれてた
そりゃ移植性がないわけだ

>>307-308
コードありがとう

>>310
-Tオプションなんてあったのか

>>309
pingで鯖落ちてないか検査した後w3mで複数のURLから取ってきて
スレの上下の不要な広告など取り除いてから git commit して
その差分見るから

全部安全に通信できるか見てからやらないと、差分の時にちょっと問題になる
通信できなかったスレがマイナス差分で大量表示されたり、
次回は大量追加されたり

git reset hard HEAD~ するぐらいならあらかじめ通信検査してからやろうと思った

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 19:45:19.02

>>310
それもあるし、どれかひとつでもエラーでping_error=1だからサーバの状態を確認してる感じがしない

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 19:47:43.57

もうひとつバグってた。こうしないと常に0で終了しちゃう。
echo ... | {
while read ... do
...
done
exit $err
}

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 20:32:51.35

>>312
> -Tオプションなんてあったのか

通信系のコマンドで、タイムアウトが指定できないものはスクリプトからは利用しないとか、
そういうことは考えないで作っちゃうタイプの方ですか？

ちなみに、大抵の通信系コマンドはタイムアウトが指定できるような気がする。

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 20:46:31.70

Windows 7 からだっけか？デフォルト設定では ICMP echo をフィルタリングしてるのって

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 21:22:03.82

>>302
> >>299
> aliasじゃないの？
長いワンライナーは場面ごとに手直しする必要のあることが多いから、
それだと融通がきかないことがありませんか？

**名無しさん＠お腹いっぱい。** · 2015/02/09(月) 22:07:20.56

2chのスレが更新されてるかどうか（新しいレスがあるかどうか）チェックするのは自分もやってる
いろいろやり方はあるだろうけど、自分の場合は
libwww-perl(debian系)に入ってるHEADコマンドで.datファイルのLast-Modifiedフィールドみたいなのを見てる

**名無しさん＠お腹いっぱい。** · 2015/02/10(火) 06:45:24.43

>>311
ここに書いてる奴本人じゃね？ｗ

**名無しさん＠お腹いっぱい。** · 2015/02/10(火) 06:59:04.70

>>316
XP じゃね？
毎回設定してたような気がする
2K は忘れた

**名無しさん＠お腹いっぱい。** · 2015/02/10(火) 07:03:40.32

>>311
ダイヤルアップとかで最初の接続に時間がかかるから ping でネットワーク接続してから、おもむろに目的のアプリケーションで接続するって言うのがあったような気がする

**名無しさん＠お腹いっぱい。** · 2015/02/10(火) 10:03:19.02

スクリプト化してると問題があったとききりわけが必要だから
ping打っているかどうか確認してるんじゃ？

>>321
ちょっと違うけど自動切断有効にしてて切れてほしくないときに
ping打ちっぱなしにしてたな

**名無しさん＠お腹いっぱい。** · 2015/02/10(火) 10:06:07.01

>>318

差分は取得しないのか

**名無しさん＠お腹いっぱい。** · 2015/02/10(火) 10:12:53.45

皆、同じようなことやってるんだなｗ

**名無しさん＠お腹いっぱい。** · 2015/02/10(火) 10:32:51.28

>>322
切り分けといっても、pingが成功したらネットワーク的に問題ないとは言えないわけで……
対話環境で作業している時だったら、お手軽だから「まずping打ってみるか」というのは
分かる気がするけど、スクリプトの場合では中途半端なように思えます。

「ICMPは通るね」というのをスクリプト中から確認できても、それほど嬉しくはないよね？

**名無しさん＠お腹いっぱい。** · 2015/02/10(火) 10:41:38.26

そういえばhttps対応とかが面倒で結局wget丸投げ取り込みとかに逃げてたりするけど
正しい汚染チェックってどうするべきなんだろう？

シェルスクリプト総合 その24©5ch.net

シェルスクリプト総合その24©5ch.net