トップページunix
1001コメント289KB

シェルスクリプト総合 その20

レス数が900を超えています。1000を超えると表示できなくなるよ。
0001名無しさん@お腹いっぱい。2012/06/08(金) 00:35:51.19
シェルスクリプトの総合スレです。
スクリプトのお勉強・自慢・腕試しなどにどうぞ。

□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
 bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
 Linuxユーザは/bin/shの正体がbashなので特に注意。
 FreeBSDユーザは/bin/shの正体がashなので注意。
 v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
  http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/sh/
  http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
 (理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
 manや参考リンクを見ましょう。
 aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルスクリプトのことをシェルってゆーな
・シェルで使えるワイルドカード等は正規表現ではありません。
 正規表現の話題はスレ違い(正規表現スレへ)

□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
 RubyやPerlの方が適した仕事には素直にそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。

前スレ
シェルスクリプト総合 その19
http://toro.2ch.net/test/read.cgi/unix/1323515200/
0802名無しさん@お腹いっぱい。2012/09/13(木) 01:31:25.80
>>801
どういうことでしょうか?
bash make -C directoryでしょうか?
えーと、makeは-fオプションで行いたいので、bash make -f directoryですか?
0803名無しさん@お腹いっぱい。2012/09/13(木) 01:35:05.89
>>801
あ、いや、つまり-Cでcd変更を兼ねるわけですね。理解しました
それで、その前にシェルを起動させなければいけないのですが、シェル起動→make -C directoryまでを
一連の動作として行うにはどうすればいいでしょう亜k?
0804名無しさん@お腹いっぱい。2012/09/13(木) 02:03:13.41
んっと、自分の考えた「手段」に固執して
シェル起動とかいう独自用語使ってるとアドバイス来ないよ。
「何をしたら何が起きてほしい」と「目的」が重要。
0805名無しさん@お腹いっぱい。2012/09/13(木) 02:32:36.62
リンクか何かをクリックしたらbashが起動してmakefileしたいです。
0806名無しさん@お腹いっぱい。2012/09/13(木) 02:35:29.22
しかしシェルスクリプトを直接起動するのはNGで、必ずbashに引数を与えて起動させなければならないとします
0807名無しさん@お腹いっぱい。2012/09/13(木) 02:40:38.93
そして最も求めている手段がshにオプション引数としてシェルスクリプトを与えて起動し、makefileする方法です
0808名無しさん@お腹いっぱい。2012/09/13(木) 06:26:57.77
はい、次の方どうぞ
0809名無しさん@お腹いっぱい。2012/09/13(木) 06:38:48.75
先生、ぼくも同じ物を探しています
0810名無しさん@お腹いっぱい。2012/09/13(木) 07:40:19.71
「cd変更」って何だ。
0811名無しさん@お腹いっぱい。2012/09/13(木) 07:52:00.73
マウントしなおすんだと思ってたw
0812名無しさん@お腹いっぱい。2012/09/13(木) 08:36:35.52
しきりに「シェルを起動」って言ってるのは、
端末エミュレータ起動のことだろうとエスパー。
あるいはcygwin環境なのかも試練。

が、そういう低レベルの質問はお断りなので、
次の方どうぞ
0813名無しさん@お腹いっぱい。2012/09/13(木) 08:40:27.04
>>805-807
デスクトップと端末エミュレータとshとbashとシェルスクリプトとオプション引数とmakeとmakefileとcdとカレントディレクトリと手段と目的がごっちゃになってる。
整理して出直せ。
0814名無しさん@お腹いっぱい。2012/09/13(木) 10:11:28.58
端末エミュレーターxtermはUNIX系のほとんどのOSに対応してるって聞いたんですが、
xtermでFreeBSDのコマンドが実行できません。FreeBSDは対応してないんでしょうか?
関係あるかどうかわかりませんが、ホストOSはLinuxです。
0815名無しさん@お腹いっぱい。2012/09/13(木) 10:21:58.22
お薬出しておきますね

次の方どうぞ
0816名無しさん@お腹いっぱい。2012/09/13(木) 21:30:04.47
>>814
FreeBSDもLinuxもUNIXじゃありません。
0817名無しさん@お腹いっぱい。2012/09/13(木) 21:34:21.69
>>816
この板にfreeBSDスレ立ってますがイタチと言われません
→freeBSDはUNIX

UNIX系OS用ソフトの大半はLinuxで動きますしディレクトリ構造が同じです
→LinuxはUNIXライク
0818名無しさん@お腹いっぱい。2012/09/13(木) 21:51:52.27
>>817
freeBSDなんていうあなたが発明したシステムが
UNIXかどうかは、ほかの人にはわかりません。
0819名無しさん@お腹いっぱい。2012/09/13(木) 22:11:31.87
出されたお薬はちゃんと飲んでください
0820名無しさん@お腹いっぱい。2012/09/13(木) 22:18:29.90
ハイ、わかりますた。
でも飲んだか飲んでないか、すぐ忘れちゃうんです。
0821名無しさん@お腹いっぱい。2012/09/13(木) 23:02:26.98
飲んだかどうか記録するシェルスクリプト作るといいです
0822名無しさん@お腹いっぱい。2012/09/13(木) 23:28:44.84
そのスクリプトを起動する事を忘れちゃうんです

っつーかある意味、マジな話、一日一度、cronやatを使えず、どうしても手動で
動かさなければならない手順を、結構いつも忘れてしまう…
0823名無しさん@お腹いっぱい。2012/09/13(木) 23:29:59.39
$ while true; do sleep 86400; ./hoge; done
0824名無しさん@お腹いっぱい。2012/09/13(木) 23:40:27.06
まぁ、1日1回動かしゃいいって訳じゃなくて、例えば商用マシンからログ類を集計して、
USBメモリにコピって、テストマシンにアップロードして、集計して、そんで最終的に
得られたデータを所定のExcelのシートに記入して、その結果出てきた情報を
ログに書き込んでスクリプトを実行する、みたいな作業だ

昔は派遣の人にお願いしてたんだが、コストカットで人が減っちまった

自動化できるんならしたいわマジ
0825名無しさん@お腹いっぱい。2012/09/13(木) 23:41:01.52
trueの代わりに : で、とか
むしろ、sleep 86400 を条件にすりゃいんじゃねとかの、誘い水かね?
0826名無しさん@お腹いっぱい。2012/09/13(木) 23:44:38.84
>>825
それだとkillall sleepされたときに一緒に終了されちゃうじゃん。
0827名無しさん@お腹いっぱい。2012/09/13(木) 23:48:41.09
なんでsleep名指しで殺すんだよ
0828名無しさん@お腹いっぱい。2012/09/13(木) 23:53:12.25
>>825
while sleep 86400; do ./hoge; done
だと、最初の実行まで24時間待たされる。

敢えてsleepを条件に入れたいなら、
while ./hoge; sleep 86400; do :; done
だな。

でもこれだと結局 :コマンドが要るから、素直に
while :; do sleep 86400; ./hoge; done
かな。
0829名無しさん@お腹いっぱい。2012/09/13(木) 23:55:28.62
処理に10秒かかるスクリプトだと、毎日毎日10秒ずつ起動時刻が遅くなっていくんだな
0830名無しさん@お腹いっぱい。2012/09/14(金) 10:42:32.57
f(){ ./hoge; sleep 86400; f;}; f
0831名無しさん@お腹いっぱい。2012/09/14(金) 11:03:37.39
そして再帰が深くなりすぎて落ちる、と。
0832名無しさん@お腹いっぱい。2012/09/14(金) 11:04:58.51
末尾最適化するようにbash改造すれば大丈夫
0833名無しさん@お腹いっぱい。2012/09/14(金) 12:35:38.76
>>824
っていうか、なんで出来ないの?
Excelのシートに記入するところは苦戦しそうだけど。
0834名無しさん@お腹いっぱい。2012/09/14(金) 16:45:58.07
windows使っていいなら簡単でしょ。板違いなだけで。
寧ろUSBメモリ移動が鬼門。
0835名無しさん@お腹いっぱい。2012/09/15(土) 13:19:37.17
grepでタブを検索したいんですがどうしたらいいでしょうか

egrep "\t" *.txt
だと、tを検索してしまいます。
0836名無しさん@お腹いっぱい。2012/09/15(土) 13:22:50.87
あと、STX(アスキーコード0x02)も検索したいのですが
こっちもやり方がよくわかりません。
ついでに教えてください。
0837名無しさん@お腹いっぱい。2012/09/15(土) 13:32:23.77
8進printfしてコマンド置換かな
0838名無しさん@お腹いっぱい。2012/09/15(土) 13:38:45.62
>>835

対話環境での話ならCTRL-Vあたりがクォート機能に割り当てられている
シェルなら

$ grep '[CTRL-V][TAB]' *.txt

スクリプトの中ならエディタでTABコード書けるだろ。
0839名無しさん@お腹いっぱい。2012/09/15(土) 13:44:39.15
スクリプトは expand -8 とかで清書する場合もあるし、意味を持ったTABをじかに書くべきじゃないな

(じゃあMakefileは? というのは無しで)
0840名無しさん@お腹いっぱい。2012/09/15(土) 15:06:46.92
>>835
http://linuxjm.sourceforge.jp/html/GNU_bash/man1/bash.1.html#lbAS
grep $'\t' *.txt
0841名無しさん@お腹いっぱい。2012/09/15(土) 21:55:57.05
>>835
grepでというのには反則だけど
perl -ne 'print if /\t/'
0842名無しさん@お腹いっぱい。2012/09/15(土) 21:59:20.76
perl使うのはこのスレでは禁止
grep -P なら許す
0843名無しさん@お腹いっぱい。2012/09/15(土) 23:49:50.18
grep -e "$(printf '\t')"
0844名無しさん@お腹いっぱい。2012/09/16(日) 09:58:27.49
巨大なディレクトリツリーの差分(ファイルの有無だけでいい)を取りたいんですが、
rsync以外で効率のいいやり方を教えて下さい。
diff -rqやfind | sort | diffでは遅すぎるのでもっといいやり方は無いでしょうか。
0845名無しさん@お腹いっぱい。2012/09/16(日) 10:10:52.16
>>844
diff <(ls -aR /dir1) <(ls -aR /dir2)
0846名無しさん@お腹いっぱい。2012/09/16(日) 10:21:29.26
>>845
ありがとうございます。確かに速いですね。
ただ、lsの出力がファイル名だけなので、diffからファイルのパスが分からないのが困ります。
他にdir1にあってdir2に無いファイルを相対/絶対パスで取得できる方法はありませんか?
情報後出しで済みません。
0847名無しさん@お腹いっぱい。2012/09/16(日) 10:26:29.46
ごめんなさい、今確認したところfind | sort | diffでもそれなりに速いことが分かりました。
勝手に遅いと思い込んでいました。とりあえずこの方法でやってみます。
回答して下さった方どうもすみませんでした。
0848名無しさん@お腹いっぱい。2012/09/16(日) 10:56:10.15
ちなみに自分が試したのは

diff -u <(cd old/ && find . | sort) <(cd new/ && find . | sort) | grep '^\+./'
rsync -naiO --ignore-existing new/ old/ | awk '{print $2}'
diff -rq old/ new/

で、上から順に速いことが分かりました。御参考まで。
0849名無しさん@お腹いっぱい。2012/09/16(日) 12:14:22.36
ディレクトリの比較は dircmp が使えるなら、dircmp を使うといいかもしれない

どちらかのみ含まれるファイルを取り出すのに diff -u して grep ^+ してるけど
commを使うといいかもしれない
0850名無しさん@お腹いっぱい。2012/09/16(日) 12:24:49.73
>>838-843
みなさん、ありがとうございました!
うちにきて弟をファックしてもいいですよ。
0851名無しさん@お腹いっぱい。2012/09/16(日) 14:49:42.09
>>849
ありがとうございます。

comm -13 <(cd old/ && find . | sort) <(cd new/ && find . | sort)

と書き換えてスッキリしました。
dircmpのほうは古いUNIXにあったコマンドみたいですね。
自分はLinuxなので使えませんでしたが、参考になりました。
0852名無しさん@お腹いっぱい。2012/09/16(日) 14:54:15.88
dircmpってSolarisに付いてるけど、
結局diffでファイルの中身比較するから遅いよ。
(ファイルの中身は比較しないで欲しいという目的なら)
0853名無しさん@お腹いっぱい。2012/09/16(日) 18:27:09.74
>>852
http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/dircmp/dircmp.sh

-dオプションをつければdiffを呼ぶ
そうでない場合でも、ファイルサイズが同じ場合には cmp を呼ぶみたいですね

なるほど、同じファイル名でも違うファイルかどうかを判定する必要があるのかdircmpは
0854名無しさん@お腹いっぱい。2012/09/18(火) 14:23:13.01
ちょっと質問です。

例えば echo "test" という 1 行だけのシェルスクリプトを作成して、foo.sh という名前で
保存します。このファイルのパーミッションを 744 にしてコマンドラインで ./foo.sh と叩くと
正常に実行できてしまいました。

シェバング行が無いのに、何故実行できてしまうのでしょう? おそらく基本的なところで
私の理解が不足しているのだと思いますので「ここを読め!」等のポインタで結構ですので、
どなたかご教示いただけないでしょうか。

ちなみに FreeBSD、AIX、CentOS で試してみましたが、いずれも同じ結果でした。
0855名無しさん@お腹いっぱい。2012/09/18(火) 14:29:46.54
ないときは /bin/sh でも呼ぶようになってんじゃないの。
ちゃんと調べてないけど。
0856名無しさん@お腹いっぱい。2012/09/18(火) 14:30:51.05
カーネルソースを読め。
0857名無しさん@お腹いっぱい。2012/09/18(火) 14:31:10.83
>>854
昔のUNIXではシェバング行なんてなかった。
テキストファイルであっても chmod +xされていればexec()される。
まずはバイナリと仮定してカーネルのexec()を呼び出す。
するとフォーマットが合わないのでエラーで返ってくる。
このあと、コマンドラインのシェルの判断で、
「sh ファイル名」の形に修正して再度カーネルのexec()を呼び直す。
これでシェルスクリプトとして実行される。

シェバング行がある場合は最初からその行に書かれたシェルのスクリプトとして
カーネル側のexec()で直接実行される。
0858名無しさん@お腹いっぱい。2012/09/18(火) 15:12:12.83
ユーザーはソフトのインストール禁止ですが、
最近、ユーザーでも自分のホームフォルダーにソフトをコピーし、
X権限をすることによってソフトが実行できてしまうことが判明しました。
これはOSのセキュリティーボールではないのでしょうか?
ユーザーのフォルダーではたとえX権限がされていても
実行できないようなおすすめのシェルって何ですか?
必要ならカーネルにバッチを当てる方法も、やもうえません。
0859名無しさん@お腹いっぱい。2012/09/18(火) 15:15:18.02
コピペ改変
http://toro.2ch.net/test/read.cgi/unix/1000022300/775
0860名無しさん@お腹いっぱい。2012/09/18(火) 15:19:10.12
>>858
とりあえず /home以下をnoexecでmountしちゃえば?
0861名無しさん@お腹いっぱい。2012/09/18(火) 15:27:38.12
つまらんネタにかまうな。
0862名無しさん@お腹いっぱい。2012/09/18(火) 15:52:29.12
>>857
> するとフォーマットが合わないのでエラーで返ってくる。

これは先頭の2byteを見ていたのね。
そこから#!を使うことになった。comment(#) + execute(!)

昔の実行形式の先頭2byteがどういう値だったかは、
/usr/share/file/magic/pdpを見るといい。
古典的なUNIXでは/etc/magicにある。
典型的なテキストファイルでは使わないシーケンスになってる。
08638542012/09/18(火) 16:18:19.96
おまいら早いですねw (褒めてます)

>>857
> このあと、コマンドラインのシェルの判断で、
> 「sh ファイル名」の形に修正して再度カーネルのexec()を呼び直す。

ありがとうございます。この部分以外は自分の理解とおおむね一致していました。
自分の理解度を再確認できて良かったです。

ただ、「シェルの判断で〜」の部分ってシェルのマニュアルにはちゃんと書かれて
いるのか、それとも「昔からそういうもんだ。ソース読め」のどちらなんでしょう?

手元では tcsh / ksh / bash で同じ挙動だったので「昔からそういうもんだ」
なのかな、という予感です。
0864名無しさん@お腹いっぱい。2012/09/18(火) 16:23:15.64
マニュアルに書いてあるかどうかと昔からそういうもんかどうかって
択一じゃないと思う。
0865名無しさん@お腹いっぱい。2012/09/18(火) 16:34:37.60
shellがmagic numberを見て、shell scriptを自分で実行するようになったのは、
bash移行のことじゃないか? それまではexecve(2)におまかせだったはず。
0866名無しさん@お腹いっぱい。2012/09/18(火) 16:50:35.22
一応手持ちのGentooマシンで調べてみたけど
GNU bash 4.2.37ではまだexecveしてENOEXECが返されるのを確認してから
そのスクリプトを読み直して処理してるみたい。
0867名無しさん@お腹いっぱい。2012/09/18(火) 21:16:25.81
どーでもいいけど昔のHP-UXで一行目がシェバングじゃないコメント行だと
ログインシェルで解釈されたような気がする。
0868名無しさん@お腹いっぱい。2012/09/19(水) 11:56:29.71
#!/bin/cat
Hello,world!

って書いてもcatが起動しないんだけど、なんで?
0869名無しさん@お腹いっぱい。2012/09/19(水) 11:59:22.55
ごめん、起動してたわ
0870名無しさん@お腹いっぱい。2012/09/19(水) 12:06:17.94
cat -n で起動したらいろんな誤解が一瞬で解けた
0871名無しさん@お腹いっぱい。2012/09/19(水) 12:07:42.49
日記か。
0872名無しさん@お腹いっぱい。2012/09/19(水) 13:51:27.02
知識の共有だ
0873名無しさん@お腹いっぱい。2012/09/19(水) 20:18:30.82
A=`./hoge | cat`
みたいなとき、./hogeのエラーを検知してリトライしたいんだけど
どうしたらいいかな
0874名無しさん@お腹いっぱい。2012/09/19(水) 20:40:36.49
ためしてないけど
A=`while ! ./hoge; do :; done | cat`
ってかんじかなぁ
0875名無しさん@お腹いっぱい。2012/09/19(水) 20:54:25.77
>>874
そっかその中でループしちゃえばいいのか
0876名無しさん@お腹いっぱい。2012/09/22(土) 17:58:27.45
シェルの正しい文法って誰も知らないみたいなウィキペディアにはハッカー?さんのコメントがありますが
望ましいシェルスクリプトの実行方法は実行権付与後に当ファイルを呼び出す方式か、 shコマンドで引数にファイルパスを指定する方法か、 .コマンドで同様にパス指定する方法か、どれになりますでしょうかね
実行時の状況次第で選ぶものだとは思いますが。。
0877名無しさん@お腹いっぱい。2012/09/23(日) 05:23:02.47
文法がどう呼び出し方法の話とつながっているのかわからんが、
明らかに3つとも意図するところは違うだろ。
0878名無しさん@お腹いっぱい。2012/09/23(日) 23:34:02.91
というと?
0879名無しさん@お腹いっぱい。2012/09/24(月) 03:46:37.39
というと=tweet
0880名無しさん@お腹いっぱい。2012/09/24(月) 10:04:32.63
具体的に。
0881名無しさん@お腹いっぱい。2012/09/24(月) 10:59:38.29
誰か >>876 を3行で日本語にして
0882名無しさん@お腹いっぱい。2012/09/24(月) 11:08:32.60
(1) ./hoge.sh
(2) sh hoge.sh
(3) . hoge.sh
をどう使い分けるか。
0883名無しさん@お腹いっぱい。2012/09/24(月) 11:08:44.90
シェルスクリプトって実行権限与える、shに引数渡す、sourceで読み込むと、
三種類実行方法がありますが、それぞれどんな特徴ですか?
それはさておき、文法を完全に把握してる人がいないんですね。wikipediaに書いてありました。
0884名無しさん@お腹いっぱい。2012/09/24(月) 11:19:08.75
文法はさておきすぎとして、
(1)と(2)はそれほど明確に使い分けてないかもね
パーミッションが立ってることが保証できて、
普通のコマンドと区別する理由がなければ(1)
0885名無しさん@お腹いっぱい。2012/09/24(月) 11:23:20.30
コマンドラインから頻繁に実行するなら (1) にしたい。
ただ #! とかモードとかちゃんと設定しなければならない。
その辺がめんどうなら (2) で。
(3) は (1)(2) とは動きが違う。
0886名無しさん@お腹いっぱい。2012/09/24(月) 11:33:50.71
>>885
(3)が違うというのはなにが違うというのか
0887名無しさん@お腹いっぱい。2012/09/24(月) 11:35:36.73
>>886
子プロセスで実行するか現在のプロセスで実行するか。
0888名無しさん@お腹いっぱい。2012/09/24(月) 11:36:18.77
釣りくさいけど、変数に代入したりcdしたりして比べてみろ
0889名無しさん@お腹いっぱい。2012/09/24(月) 11:36:48.66
たとえば hoge.sh 内で cd / してみ。
0890名無しさん@お腹いっぱい。2012/09/24(月) 11:37:32.27
ダウンロードして一回だけ実行って時は、(2)をさせる記述が多いね。
0891名無しさん@お腹いっぱい。2012/09/24(月) 12:11:39.88
やっぱり文法の話が気になる。
0892名無しさん@お腹いっぱい。2012/09/24(月) 12:42:24.30
文法の話、参照先読んから書きたいんだけど、臨時串がNGワードではねやがる。

bash開発時にsh互換にするのに文法で苦労したんだって。
その時の語録みたいよ。
08938922012/09/24(月) 12:59:18.55
shのドキュメントがイマイチだったり、yaccが不完全だったんだって。
みんな使っている機能なのに。
だから「本当は誰もshの文法がどうなっているのか知らないんだよ。
ソースコードなんて読んだってほとんど役立たねえよ」ってことらしい。
0894名無しさん@お腹いっぱい。2012/09/24(月) 14:30:47.04
不完全って何だよ、もとからyaccなんか使ってねえよ
伝聞じゃなくてソース出せ
0895名無しさん@お腹いっぱい。2012/09/24(月) 14:45:31.61
http://ja.wikipedia.org/wiki/Bourne_shell#.E8.AA.9E.E9.8C.B2
コメントってこれのこと?
0896名無しさん@お腹いっぱい。2012/09/24(月) 14:46:52.91
http://www.linuxjournal.com/article/2800?page=0,2
yaccうんぬんはこれか。
0897名無しさん@お腹いっぱい。2012/09/24(月) 15:59:04.26
「yaccが不完全」とは書いてないな。
0898名無しさん@お腹いっぱい。2012/09/24(月) 16:08:48.36
http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.41.3287&rep=rep1&type=pdf
コメントの出典。
0899名無しさん@お腹いっぱい。2012/09/24(月) 16:26:39.69
えwwwいwwwごwww
We are Japanese!
0900名無しさん@お腹いっぱい。2012/09/24(月) 16:54:24.62
rcの宣伝するのにshをdisってるだけで、bashだの互換性だの関係ないじゃん。
0901名無しさん@お腹いっぱい。2012/09/24(月) 16:56:23.03
>>900
>>892>>896を読んだんだろう。
レス数が900を超えています。1000を超えると表示できなくなるよ。