シェルスクリプト総合その20

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 00:35:51.19

シェルスクリプトの総合スレです。
スクリプトのお勉強・自慢・腕試しなどにどうぞ。

□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
　bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashなので特に注意。
　FreeBSDユーザは/bin/shの正体がashなので注意。
　v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
　 http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/sh/
　 http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
　(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルスクリプトのことをシェルってゆーな
・シェルで使えるワイルドカード等は正規表現ではありません。
　正規表現の話題はスレ違い(正規表現スレへ)

□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　RubyやPerlの方が適した仕事には素直にそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。

前スレ
シェルスクリプト総合その19
http://toro.2ch.net/test/read.cgi/unix/1323515200/

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 01:03:54.93

太古の昔に
レイヤードシェル
もしくは
シェルレイヤー
という物が存在していたらしいのですが、
どんな物だったのでしょうか?
ジョブコントロールできるらしいのですが。

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 02:06:15.15

おつ

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 02:15:08.82

UNIXとかいう糞ＰＣｗｗｗｗｗｗｗ京とかいう存在しても価値ないただただ無意味に速度早くしただけのコンピューターとかもあるしｗｗ

何のための板だよここｗｗｗ

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 06:17:43.38

ようこそ、その糞みたいな板にワザワザご苦労様。

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 06:33:16.03

Q. シェルは UNIX の勉強に使えますか？
A. シェルは UNIX に慣れた人間がスクリプトを書いて楽するのには向いていますが、
　　UNIX の勉強には向いていません。

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 07:20:45.00

>>6
頭大丈夫か？
シェルを全く使用せずにUNIXの勉強とか、どんなアクロバットだよｗ

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 07:44:41.28

>>2
GNUScreenから画面管理を引いたようなもの。

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 07:58:45.93

>>6
つまり座学で基礎理論を学んでから出直せってこと？

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 09:38:32.41

>>2
衣服(shell)の重ね着(layered)のことだろ。
登山なんかでは速乾性の下着から防水防風透湿のジャケットまで
機能の異なる薄手のシェルを何枚も重ねて着るのが常識。

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 09:49:49.84

>>2 shl BSDのジョブコントロールのSysV版
http://docstore.mik.ua/orelly/unix/unixnut/c02_191.htm
http://www.unix.com/man-page/All/1/shl/
http://cai.cs.shinshu-u.ac.jp/sugsi/Lecture/HowToUnix/3-1.html

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 09:55:28.15

>>8が端的に説明できてる。ただscreen知らないとわからない。

**名無しさん＠お腹いっぱい。** · 2012/06/08(金) 16:51:20.05

シェルといえば、ガソスタだろ？または、>>10だな。常識。
... なる程、shlか。知らなかった。sh -kといい、まさにトリビア級。すごい。

忍法帖【Lv=40,xxxPT】 · 2012/06/09(土) 13:44:28.09

grepで取り出した10行のうちの2行目を取り出したいのですが、
何か簡便な方法はありませんか？

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 13:48:39.99

sed -n 2p

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 13:48:53.77

>>14
素人は grep ～ | head -n 2 | tail -n 1 なんてするところだろうな

Cで2行目取り出すツールを書くのが最速
fgetc()とかで何とかなる

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 13:53:34.23

>>14
grep -A1
でいいじゃん。

一致した行自体も出るけど、エスパーするとむしろその方がいいと出てる。

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 13:57:44.31

>>17
それは一致した行の次の行を取り出したい場合だろｗ欲嫁

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 14:01:37.89

なぜにfgetsじゃなくてfgetc？

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 14:07:19.90

…などとデバッグしてるぐらいなら head -n 2 | tail -n 1 の方がずっと早いな。
まあ、ふつーはそれすらせずに>>15だが。

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 14:18:33.49

「grepで引っかかる行が10行あります。これら10行それぞれの次の行(2行目)を
取り出したいのですが、何か簡便な方法はありませんか？」

という質問だったとしたら?

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 14:18:49.34

効率的には grep -m2 ～ | tail -n1 とかの方がいいのかね

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 17:31:36.34

>>16
あんまり釣れないね。

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 21:38:41.95

質問がわかりにくくて済みません。実は >>21 さんの意味で質問しました。
何か簡便な方法がありましたらお願いします。

**名無しさん＠お腹いっぱい。** · 2012/06/09(土) 21:46:40.88

>>24
次の行も欲しいってのなら>>17の言うとおり-Aオプション使うのが簡単じゃないかな
次の行だけ欲しいってのならgrep ～ | sed -n '/pattern/{n;p}' とか。まあこれは2行連続でパターンマッチする可能性がある場合は使えないんだけど。
あとはawkかperlあたりで適当なスクリプト組むくらいかねえ

25 · 2012/06/09(土) 21:49:49.12

しまった >>25 は grep 必要なかった

**名無しさん＠お腹いっぱい。** · 2012/06/10(日) 05:16:55.25

環境変数IFSってforとread以外に使い道あるのかしら

**名無しさん＠お腹いっぱい。** · 2012/06/10(日) 14:21:25.03

コマンドを実行した複数行の結果を変数に格納した後、その各行に処理を行いたいのですが、
たとえば
hoge=`ls -l`
とやると、改行が格納されません。
改行を含めた結果を格納するのはどのようにしたら良いのでしょうか？

**名無しさん＠お腹いっぱい。** · 2012/06/10(日) 14:32:53.34

>>28
hoge=`ls -l` で改行は格納される。

echo $hoge ではなく、

echo "$hoge"
で変数の値を取り出すこと。

**名無しさん＠お腹いっぱい。** · 2012/06/10(日) 14:43:07.38

早速の回答、誠にありがとうございまする

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 18:12:34.43

ls -1 | nohup xargs -L1 -P20 -I@ sh -c "./a.out @ < @.txt > @.log 2> err.log" > progress.log &
このコマンドどこに問題がありますか？
最初の20行分しか処理されずに止まっちゃうんだけど・・・泣

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 18:19:37.78

expectコマンドを使わずにシェルスクリプトでパスワードを自動入力させるにはどのようにすればよいでしょうか？

#!/bin/bash
ssh user@hostname
パスワードを入力するコマンド

上記のようなスクリプトが作りたいです。
どなたか教えて頂けないでしょうか。よろしくお願いします。

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 18:34:26.09

>>32
echo unko | ssh user@hostname

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 18:46:46.29

>>32
公開鍵認証じゃだめなん?

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 18:49:57.90

>>33
それじゃだめじゃね。

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 18:59:21.99

質問者ですが、
>>31
はスレチでした？

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 19:06:40.96

>>33
試してみたのですが、パスワード入力を求められました。。

>>34
パスワード入力したいです。

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 19:16:56.47

>>31
20行毎に別々に sh -c "...." が起動されるから、
> @.log 2> err.log とかが全部上書きされて
最後に書いた20行分しか残らない。

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:08:55.76

>>38
すみませんが詳しい方のみ回答をお願いします

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:17:55.37

>>31
> progress.log じゃなくて
>> progress.log じゃないの?

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:20:23.43

>>40
すみませんが詳しい方のみ回答をお願いします

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:26:15.13

パイプ出力なのに ls -1 とかやるのは素人

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:29:12.04

すみませんが詳しい方のみ質問をお願いしますw

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:29:30.99

>>42
すみませんが詳しい方のみ回答をお願いします

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:31:12.33

すみませんが詳しい方のご健闘をお祈りします

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:33:43.17

>>42
findってこと？
結局どうすれば正解なの？
入力（ls -1）：
a
b
c
d
e
f
実行されたいコマンド（xargs -L1 -P2）
./a.out a
./a.out b
====終わってから
./a.out c
./a.out d
====終わってから
./a.out e
./a.out f
って感じにしたいわけだけど。

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:35:02.58

ちなみに39とかは質問者（31+46）じゃないから。
お願いだから邪魔しないで。

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 20:44:15.91

出力はまああまり気にしてなくて、
むしろ
./a.out a
./a.out b
====ここで止まっちゃう
のが大問題。

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 21:29:01.48

>>46
>>42
が言ってるのは出力が端末でないなら ls -1 しなくても ls でいいって話．

xargs -L1 -P2の挙動があくまで2プロセス同時にやるって話だから
./a.out aが先に終われば ./a.out bが終わる前に ./a.out cを先に実行する
望みの挙動にするのは一行スクリプトだと割と面倒だから素直にmakeで依存関係書いてmake -j 20とかした方がいいかも

ちなみに俺の環境で >>31 を試してみたけどちゃんと20行以降も実行される．
可能性として気になったのはnohupの位置なんだけど
もしかして実行開始してから端末閉じたりしてる？

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 22:31:56.89

>>49
丁寧にありがとう。
しばらく使わないと忘れるんだけど、
> ./a.out aが先に終われば ./a.out bが終わる前に ./a.out cを先に実行する
これはまったく問題ない。説明不足ですまんかった。

> もしかして実行開始してから端末閉じたりしてる？
たぶん、それが原因だと思う。
ただ、xargの中に入れるのも混乱してしまうんだ。
どうすればうまく生き残るの？

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 22:39:01.73

>>50
俺はnohupの挙動がちょっと曖昧だから確信持てないけど
nohupを先頭に持ってくるか
#!/bin/sh
ls -1 | xargs ...
っていうのを書いたファイル用意してnohup付けて実行するとか
あとはnohupじゃなくてCtrl-Zで一時停止 -> bg -> disown したり screen で代用してみるとか

**名無しさん＠お腹いっぱい。** · 2012/06/12(火) 23:12:10.37

>>51
めっちゃ参考になる。ありがとう。
なんかパイプで色々つなぐのはいいけど、結局クォーテーションマークで躓くんだよね。
もうちょっと真面目に考えて設計してほしいわ。

**名無しさん＠お腹いっぱい。** · 2012/06/13(水) 00:35:25.15

少なくともバッチ処理なんだから nohup とか使うんじゃなくて batch とか
at コマンド使うほうが素直な気がする。

もっともバッチ処理システム入れて管理すれば batch コマンド以上に
いろいろかゆいところに手が届いていいと思うが。

**名無しさん＠お腹いっぱい。** · 2012/06/14(木) 14:17:28.57

echo *.csv | cat

だとファイル名が表示されるだけで、

echo *.csv | xargs cat

だとファイルの中身が表示されるのはなぜでしょうか？
xargsを付けなくてもファイルの中身が表示されると思ってました。。

**名無しさん＠お腹いっぱい。** · 2012/06/14(木) 14:20:16.35

cat がそういう作りだから。
man cat 読め。

**名無しさん＠お腹いっぱい。** · 2012/06/14(木) 14:23:59.09

>>54の挙動だと、

$ echo 54nobaka | cat
54nobaka
は間違いで、
$ echo 54nobaka | cat
cat: 54nobaka: No such file or directory
が正しいと言うことになるな。
あり得ん。

**名無しさん＠お腹いっぱい。** · 2012/06/14(木) 14:28:27.78

cat *.csv

だとファイルの中身が表示されるのに、

echo *.csv | xargs cat

だとそのようなファイルやディレクトリはありませんになることがあります。

man cat 読んでもわかりません。

**名無しさん＠お腹いっぱい。** · 2012/06/14(木) 14:30:22.51

>>56
cat: 54nobaka: No such file or directory
の意味は分からなかったけど、標準入力に渡してもダメ、引数に渡せってこと？

**名無しさん＠お腹いっぱい。** · 2012/06/14(木) 14:41:19.14

>>57
*.csv にマッチするファイルがないから
*.csv がそのまま渡った、とかじゃないの。

>>58
そう。
引数なしの cat は
標準入力から受け取ったものをそのまま標準出力に渡す。

**名無しさん＠お腹いっぱい。** · 2012/06/14(木) 14:44:47.08

>>59
なるほど。ありがとうございます！

cat *.csvとすれば良いから、わざわざ|とexec使う必要もなかったですね。

**名無しさん＠お腹いっぱい。** · 2012/06/14(木) 14:49:06.50

>>59
>*.csv にマッチするファイルがないから

*.csv にマッチするファイルはあります。

シェルスクリプト総合 その20

シェルスクリプト総合その20