シェルスクリプト総合その5

**名無しさん＠お腹いっぱい。** · 2006/01/21(土) 09:00:29

シェルスクリプトの総合スレです。
スクリプトのお勉強・自慢・腕試しなどにどうぞ。
まずは注意点、リンク、地鎮祭など(>>1-6くらい)をご覧ください。

□お約束
・特記なき場合はbourne shがデフォルトです。
　bash/csh/tcsh/zsh/ksh/ashなどに依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashなので特に注意。
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルスクリプトのことをシェルってゆーな
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)

□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　RubyやPerlの方が適した仕事には素直にそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。

**名無しさん＠お腹いっぱい。** · 2006/02/28(火) 01:23:13

>>416
ｽﾚﾁｶﾞｲだってば。

**名無しさん＠お腹いっぱい。** · 2006/02/28(火) 09:02:57

>>391
> 拡張BNFになっとるがな。> bashのbisonソース
遅レスだけど教えてくれてありがとう。

シェルスクリプトの展開／置換と評価／実行の規則についてなんですが、
一つの入力単位（if などの複合文でなければ１行の「コマンドライン」）ごとに

字句構文解析→（展開／算術式評価／置換）
→（置換の結果生じた入力単位ごとに、字句構文解析→実行）

という流れで実行に移されると解釈していいのかな？
（あまりにも自明なことかもしれませんが…最後の () 内では
展開／置換が生じることはありえない？）

**名無しさん＠お腹いっぱい。** · 2006/02/28(火) 09:44:27

だからソース読めよ。死ねや、ハゲ。

**名無しさん＠お腹いっぱい。** · 2006/02/28(火) 10:19:16

アスキーからでているバイブル、「UNIXプログラミング環境」読みなさい。
bashと同じスタイル(yacc, lex使う)でshell作っているから。

# bison=GNU yacc

**名無しさん＠お腹いっぱい。** · 2006/02/28(火) 10:22:55

あ、lexは使ってねーわ。bashは。

**名無しさん＠お腹いっぱい。** · 2006/03/04(土) 23:22:22

ファイルに書かれた環境変数を展開するにはどうしたらいいでしょう

$ echo $PWD
/home/nanashi/
となりますが、では $PWD と書かれたファイルから同じような出力を得るには
どうしたらいいでしょうか
$ cat nanashi.txt
pwd = $PWD
path = $PATH
$ [なにかコマンド] nanashi.txt
pwd = /home/nanashi/
path = /sbin:/bin:/usr/bin...

**名無しさん＠お腹いっぱい。** · 2006/03/04(土) 23:24:48

sed -e 's/\$PWD/'"$PWD/" -e 's/\$PATH/'"$PATH/" < nanashi.txt

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 00:06:27

>>422
なんで = の間が開いているの?

PWD="$PWD"
PATH="$PATH"

なら、

$ . nanashi.txt

で終りなのに。

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 00:08:18

>>422
完全に信頼できるソースから入手したファイルでないならば危険。
ナガタ君のように泣きを見ることになる。

**425** · 2006/03/05(日) 00:14:59

書きかけで送信しちまった。危険なのでやり方だけ

そのファイルの前に
cat <<EOF_EOF_EOF_EOF_EOF_EOF_EOF_EOF_EOF_EOF
後ろに
EOF_EOF_EOF_EOF_EOF_EOF_EOF_EOF_EOF_EOF
を追加したファイルを作ってshに食わせる。

**422** · 2006/03/05(日) 00:56:11

何がやりたいかというと、まー設定ファイルの雛形みたいのを
作りたいんですよ。例えば、httpd.conf であれば、
httpd.conf.in ってのを作って、中に
ServerRoot "$PWD/testroot"
とか書いておいて展開したいという。
やっぱ sed ですかねぇ

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 00:58:20

なんで sed じゃだめなん?

**422** · 2006/03/05(日) 01:10:43

いや、環境変数展開なんだからシェルスクリプトでやったほうが
簡単にできるのかな、と妄想してみただけです。
ちなみに >>423 さんのだと、$PWD を展開した結果に
スラッシュが含まれているからダメっぽいです。
sed -e 's#\$PWD#'"$PWD#" nanashi.txt
とりあえずこんな感じにしてみます

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 01:12:53

cppやm4が古典的定番

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 03:36:54

awkもわるれるなとアホが言ってます！＞＜

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 08:38:50

autoconf使えばいいのに…

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 08:46:33

linuxでしかノートラブルで動かねえautoconfなんか意味ねえ。
autoツール使いたがる気違いは絶滅すればいいのに。

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 12:08:57

autoconf を利用しているパッケージの問題を、autoconf 自身の
問題と混同しているのね。
シェルスクリプトのことをシェルと言ってるやつと同じレベルだな。

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 12:31:46

autoツール

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 13:22:06

>>434 あほー
互換性が無い事をチェックできないカタワなシステムと
それを有り難がって使ってる気違いの事だよ。

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 21:54:00

436がその気違いの書くソフトウェアを使わずに生きていけばいいだけじゃん。

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 22:21:01

>>436
autoconf はマジでなんでもチェックできるぞ。
互換性が無い事をチェックできなかったとしたら、それは autoconf じゃなくて
configure.in/configure.ac を書いた奴のせい。
おまいがやってるのは、シェルスクリプトのバグに対して、シェル自体に文句
を言ってるようなものだ。

**名無しさん＠お腹いっぱい。** · 2006/03/05(日) 22:28:30

>>438
他スレで見つけたのだが、古いOSだと ./configureが動かないことがあるらしい。
(以前は動いたが、autoconfの新しいバージョンで動かなくなったらしい)
ソフト側が悪いんじゃなく、autoconf側が悪いようだよ。
↓
http://pc8.2ch.net/test/read.cgi/unix/1139155618/311

**名無しさん＠お腹いっぱい。** · 2006/03/06(月) 00:20:21

そんな黒塗りメールをよく信じる気になったな。

**名無しさん＠お腹いっぱい。** · 2006/03/06(月) 07:14:29

>>436
configure.in/configure.acを正しく書かなければ、まともに動くconfigureを
生成できないautoconfというヘタレなシステムを批判しているのだ。

**名無しさん＠お腹いっぱい。** · 2006/03/06(月) 09:56:56

Cコンパイラも否定されそうです

**名無しさん＠お腹いっぱい。** · 2006/03/06(月) 10:28:38

これがFreeBSD厨というやつか

**名無しさん＠お腹いっぱい。** · 2006/03/06(月) 11:23:56

FreeBSDをばかにするな！
2ちゃんねるもyahooもSonyJapanもlivedoorもFreeBSD

**名無しさん＠お腹いっぱい。** · 2006/03/06(月) 12:55:05

>>442
Cコンパイラと比べるな。機械語と比べるのがふさわしい。

**名無しさん＠お腹いっぱい。** · 2006/03/06(月) 22:44:08

>>441
筋道のとおった議論をしなければ話を聞いてくれない
掲示板というシステムも批判したらいかがですか？

**名無しさん＠お腹いっぱい。** · 2006/03/06(月) 23:41:11

>>444
全部、ダメサイトばかりじゃないかよ。

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 00:00:39

ねたにまじれすfreeかこわるい

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 00:19:36

>>441
おまえ超面白い。

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 14:58:09

重複する文字列を統合するやり方を教えてくだされ

@aaa.com
@hoge.net
@foo.bar
@aaa.com
@foo.bar

を

@aaa.com
@hoge.net
@foo.bar

と言うように、重複した文字をまとめたいんです。

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 15:00:03

sort して uniq したら？

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 15:20:16

sort -u

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 15:44:42

>>451
>>452

シェルスクリプトではなく、普通のコマンドで出来たのね(^_^;

感謝！

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 16:12:32

sort するから表示順序が変わるけど、そこは大丈夫?

$ cat << _EOF_ | sort -u
> @aaa.com
> @hoge.net
> @foo.bar
> @aaa.com
> @foo.bar
> _EOF_
@aaa.com
@foo.bar
@hoge.net

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 16:38:26

順序が変わるのがいやなら

awk '{if (!seen[$0]++) print}'

とかな。

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 22:36:41

一工夫すれば順番を維持する事も可能。

cat -n | sort -k 2 -u | sort -n | cut -f 2-

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 23:44:45

普通のコマンドとやらもスクリプトの一種。

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 23:54:31

えーっと…

**名無しさん＠お腹いっぱい。** · 2006/03/07(火) 23:59:45

そっとしといてやれ。

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 08:15:14

>>456
そのアイデアはいいな。
前に同じような作業したときは、
perl で一度出てきた行を記憶しておくという
非常に馬鹿正直なやり方をしてた。

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 08:40:08

やっていることは、たいしてかわらんだろ。

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 11:04:57

（´・ω・）

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 11:12:40

(内部)sortは全部抱え込む必要があるので、
>>455と>>460の方がメモリに抱える行は少ないわけだが…

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 11:13:44

ただ>>456は応用の効く方法ではあるけどな。

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 11:16:55

>>463
メモリとか気にするなら
シェルスクリプト使わないよ。
多少実行時のパフォーマンス悪くても
さくっと作れる方重視でいいじゃん。

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 12:24:04

>>455が簡潔だよな。

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 12:25:35

実際に応用が利くのは、awkとかsedだよな。

**名無しさん＠お腹いっぱい。** · 2006/03/08(水) 12:27:31

プログラミング言語だしなw> awk

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 00:56:08

シェルスクリプトなんていまやじじいどもの暇つぶしなんだから
効率なんか気にするな。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 01:02:26

若者はそう呟きながら、sh なら5行で書けることを実現するために
perl のモジュールのインストールをはじめるのであった。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 01:18:58

>>469を援護するつもりはないけど
perlのモジュールならWinでもつかえるな、、、とか言ってミルク

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 01:35:23

>>470
ボケ老人乙。

その5行で書けて、perlにモジュールが存在する具体例を
挙げてみようね。

口から出まかせはやめよう。お前のようなやつの年金を払っているかと
思うと反吐が出そうになる。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 01:45:30

その勢いで、ちょっと考えてみれば良いのに…

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 02:09:18

エロ画像のダウン用だ。4行しかなかったから適当に改行してくれ。
while read url;do
if [ -z "$referer" ]; then referer="$(dirname $url)/index.html"; fi
test -f $(basename $url) || (while ! wget --user-agent='Mozilla/4.0 (compatible; MSIE 6.0; Windows 98; Win 9x 4.90; T312461)' --referer="$referer" --header='Accept-Encoding: gzip, deflate' --header='Accept-Language: en-us' "$1"; do sleep 1; done)
done

perlのモジュールというとLWPか。生活保護費もよろしくな。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 02:56:35

grepやegrepで、検索文字列を囲むときに、
ダブルコーテーション使ったりシングルコーテション使ったりいろいろみたいなのですが、
どちらが正しいとかはありますか？

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 03:04:45

ない。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 03:05:17

>>475
シングルとダブルでは展開される要素の種類が全然違う。
正しいとかじゃなくて用途で使い分けるもの。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 07:26:44

>>475
あえて「どちらが正しい」というなら、
シングルクォートが正しい。
検索文字列などの中で、シェル変数の展開等が必要ないのに
ダブルクォートで囲ってあるのはバグの誘発になるのでやめた方がいい。

シングルクォートで囲っておけば、
シングルクォート自身以外はすべてシェルの解釈を避けられる。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 08:38:11

>>474
その手の話は専用スレがあるよ。

連番のＨ画像/動画を一気にダウンロードする2
http://pc8.2ch.net/test/read.cgi/unix/1135533382/

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 09:41:23

>>474
おいおいwgetなんて使うなよ。無理してシェルスクリプト使って破綻してる例だな。

perl使った方がほぼ全ての点で優ってる。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 18:17:37

>>474
ちょっと添削。
「while ! コマンド」
という書き方は bashを含む一部のシェルでしか使えない。
「until コマンド」
と書いた方がいい。

あ、
$(basename $url)
も突っ込みたいが、またの機会に・・

>>480
shellで書いた方が頭がいい。>>474 は別に破綻していない。
何でもperlで書くのは良くない。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 18:20:02

>>481
なんで perl で書いちゃいかんの?

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 19:44:28

最近、国語能力低い人多いね。

【設問１】
>>481 が、なぜperlで書くと良くないと言っているか、
本文中の言葉を使って書き出せ。(5点)

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 19:48:54

強いて言えば>>474は毎回wgetプロセスを起動させているために、毎回
DNSルックアップとconnectを行ってしまうのはあまりよろしくないかも
知れない。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 20:05:08

>>484
DNSはcacheしてるから無問題。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 22:52:59

どうしても解決できない問題があり、質問させてください。

-------スクリプトA--------------
#!/bin/sh

echo 'NAME=$HOST' | egrep 'NAME=\$HOST'
-------ここまで--------------

↑のスクリプトを実行すると

NAME=$HOST

と表示されます。（期待する結果）

-------スクリプトB--------------
#!/bin/sh
aaa=`echo 'NAME=$HOST' | egrep 'NAME=\$HOST'`
echo $aaa
-------ここまで--------------

↑のように、変数に入れて、echoで出力すると、空行が1行表示されるだけなのです。
本当はスクリプトAのように出力させたいのです。

どうすればよいのか、よろしくご教授お願いします。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 22:57:19

>>486
` ` で囲まれた中の \ は要注意。

$ aaa=`echo 'NAME=$HOST' | egrep 'NAME=\\$HOST'`
$ echo "$aaa"
NAME=$HOST

期待される結果。

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 23:06:04

>>487
紙さま！！
ありがとうございます！！！

**名無しさん＠お腹いっぱい。** · 2006/03/09(木) 23:10:07

展開のdebugには
#! /bin/sh -x
を推奨。

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 06:04:26

すみません。質問させてください。
外部ファイルに
IP=111.222.333.444
と書いたファイルがあります。
これを読み込んで

#!/bin/sh

cat << EOF > /home/test.txt
ip='${IP}'
EOF

を実行すると、test.txtに

ip='111.222.333.444^M'

と、「^M」と言う文字が入ってしまいます。
「111.222.333.444」だけを書き込むにはどうしたらいいでしょうか？
よろしくお願いします。

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 07:29:08

>>490
そもそも、外部ファイルの IP=111.222.333.444 に、
もともと ^M が付いているのが原因なので、
UNIXファイルとしてエディットして ^M を付けないのが正しい解決法だが、

どうしてもシェル側で ^M を取りたいなら、
外部ファイルを . で読んだ後で、

IP=`echo $IP | tr -d '\r'`
を実行してから cat 以下を実行すれば良い。

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 07:43:37

>>491
ありがとうございます！
感謝感謝！

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 09:44:51

物凄いレベルの低さだなw

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 09:55:47

（　´∀｀）　ｵﾏｴﾓﾅｰ

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 10:50:22

>>491
というか、シェルスクリプト自体が^M付きなんだろ?

cat << EOF > /home/test.txt^M
ip='${IP}'^M
EOF^M

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 12:10:49

>>495
いや、それだと #!/bin/sh^M で動作しないし、
test.txt^Mを読むにも苦労するはずだから、
そういうわけではないはず。

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 12:12:55

>>495
あ、それに、EOF^Mになるから、cat自体が終了しないじゃないか。
よって、シェルスクリプト自体には ^Mが付いていない、が正解。

IP=を書いたファイルのみ ^M が付いていると思われ。

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 15:53:04

みんなイジワルですねｗ

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 15:58:36

dos2ux ﾊｧﾊｧ

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 16:55:47

しかし cat が ^Mつけるってのも解せない話だよなあ。

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 17:13:53

>>500
catが ^Mを付けてるんじゃなくて、
ヒアドキュメントの $IPが展開される時、
シェル変数IPの中には、もともとの別ファイルにあった ^Mが入っているので、
これがそのまま展開されるという話だろ。

というか、>>492 で解決したって言ってるんだから、
それ以上言うことないだろ。

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 17:24:12

まぁ茶でも飲めや( ﾟДﾟ)⊃旦旦旦旦旦

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 22:22:02

解決したことをうだうだ言っても仕方ないけど…

> IP=111.222.333.444

こんなIPアドレスNEEEEEEEEEE!

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 22:34:03

>>503
例示のためにわざとありえないIPを書いたんだろ。
グローバルなIPを例示したい時、こういう書き方をすることがある。

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 23:25:40

相変わらずレベル低いなw

**名無しさん＠お腹いっぱい。** · 2006/03/10(金) 23:32:16

（　´∀｀）　ｵﾏｴﾓﾅｰ

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 08:29:05

>>504
>>グローバルなIPを例示したい時、こういう書き方をすることがある。
ねーよ

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 09:17:20

日本人のパスポート申請書類のサンプルに
アルファベットで外人の名前を書くぐらいにありえないな。

つまり、そういう例示をする奴は度外れて常識がない門外漢。

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 09:18:14

シェルスクリプトって書けると幸せですか？

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 09:32:18

時給いくらで働いている派遣は仕事が一瞬で終わってしまうので、不幸になります。

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 09:48:50

>>507
あるだろ。プライベートIPなら、
192.168.12.34 とか適当に例示して問題ないけど、
グローバルだと、実在する可能性があるので例示が難しい。
だから、わざと256以上のオクテットを含ませておいて例示する。

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 09:50:47

例示は 192.0.2.0/24 使え。

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 10:08:50

>>512
それって、RFCか何かで決まってるの?
あと、クラスBやクラスAのアドレスを例示したい時はどうするの?

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 10:18:00

>>513
RFC3330
今どきクラスなんて使わん。

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 10:47:46

>>514
今どきCIDRなのは知ってるが、
ナチュラルマスクの関係で、
あえてClass A or Bのアドレスを例示したい時はどうするの?

**名無しさん＠お腹いっぱい。** · 2006/03/11(土) 10:49:58

さぁ?

シェルスクリプト総合 その5

シェルスクリプト総合その5