シェルスクリプト総合その9

**名無しさん＠お腹いっぱい。** · 2007/08/15(水) 07:25:02

シェルスクリプトの総合スレです。
スクリプトのお勉強・自慢・腕試しなどにどうぞ。
まずは注意点、リンク、地鎮祭など(>>1-6くらい)をご覧ください。

□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
　bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashなので特に注意。
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルスクリプトのことをシェルってゆーな
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)

□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　RubyやPerlの方が適した仕事には素直にそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。

前スレ
シェルスクリプト総合その8
http://pc11.2ch.net/test/read.cgi/unix/1171517324/

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 03:17:31

SED&AWKも忘れないで by おら

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 03:49:30

>>618
その本初心者でもわかりやすい？

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 10:07:59

>>594
perl -aF, -nle '$X{$F[0]} or print; $X{$F[0]} = 1'

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 12:19:59

perlって見ためが汚いねｗ

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 12:39:17

sedの置換について質問
タブ(\t)は置換できるのですが改行(\n)が置換できません。
例えば # cat a.txt
aaa
bbb
aaa(タブ)bbb

3行目の(タブ)区切りは置換できるけど1行目と2行目にマッチした文字を置換できません。
sedじゃ無理？こういうのawkでできたりしますか？

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 12:47:27

>>622
sedについてはこちらへ
↓
sed
http://pc11.2ch.net/test/read.cgi/unix/1085730992/

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 12:56:24

cat /tmp/a.txt | awk '{sub("$", "<CR>"); sub("\t", "<TAB>"); print}'

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 13:09:34

だから、catが(ry
ファイル名を前にもってきたいなら、せめて、
< /tmp/a.txt awk ...
と書け。

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 13:21:07

>>554読んどけ。

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 15:50:37

>>621
そうか？

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 21:32:17

質問です。

a.txtの内容
----------
aaa
bbb
ccc
bbb
----------

このa.txtを
----------
aaa
bbb
ccc
ddd
----------
↑のようにa.txtを置換して保存したい。
この文字は何行目にあるか不明だとして
一番下のbbbをdddに置換することはできますか？sedでもawkでもいいのです。
2chなのになぜかたらい回しにされてるのですがよろしくお願いします。

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 22:00:52

#!/bin/sh
ed a.txt << EOS > /dev/null
\$a

.
?bbb?c
ddd
.
\$d
wq
EOS
いったん末尾に1行挿入するのがコツ

**628** · 2007/12/19(水) 22:06:31

１行のコマンドで出来ないものでしょうか？

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 22:33:42

>>619

かなり、とっつきは悪い。
特にsed編は、使用目的がtroffマクロの置換とか、プリンタ整形言語の整形とか、訳分からん。
awk編はまあ、用例も身近なのが結構有るけど・・・

でも、内容は極めて濃い。
金を出して購入し、何度も読み返す価値は有ると思う。

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 22:37:34

>>622

いっている意味が良く分からんが、
エスパーすると、それはawkよりsedの方が得意だと思う。

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 22:44:44

awk '/bbb/{bbb=i};{l[i++]=$0};END{l[bbb]="ddd";for(j=0;j<i;j++){print l[j]}}'

**628** · 2007/12/19(水) 22:52:17

>>633
ありがとう御座います！
あなた様をずっと待ってました・・・！

**628** · 2007/12/19(水) 22:57:16

>>633様
それをa.txtに保存するにはどうしたらいいでしょうか？
awkは呪文のようでまったくわかりません。。。

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 22:59:58

>>634
おいおい、>>633 じゃ大間違いだと思うがｗｗ

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 23:05:57

>>633 は、一番最後に現れた bbb の行を無条件に ddd に置換しているだけ。

そうじゃなくて、>>628 のやりたいのは、
「ccc<改行>bbb」を「ccc<改行>ddd」に置換したいということだろ?
複数行に渡る置換をしたいということ。

sedスレの方に、すでに解答が出てるよ。1行コマンドで行ける。

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 23:09:21

% cat /tmp/a.txt
aaa
bbb
ccc
bbb

aaa
bbb
ccc
ccc
bbb

aaa
bbb
ccc
bbb
% cat /tmp/a.txt | perl -e '($_ = join("", <>)) =~ s/(aaa\nbbb\nccc\n)bbb/$1ddd/g; print '
aaa
bbb
ccc
ddd

aaa
bbb
ccc
ccc
bbb

aaa
bbb
ccc
ddd

**628** · 2007/12/19(水) 23:13:40

>>637
そうでしたか。
答えはsedスレの何番目ですか？

**名無しさん＠お腹いっぱい。** · 2007/12/19(水) 23:31:14

そうでしたか。ってwww
お前さんは自分が直面している問題を自分で把握してないのか？wwww

sedではないが別解がひとつ上にある。"aaa改行bbb改行ccc改行bbb"を
全て"～ddd"に痴漢する

**名無しさん＠お腹いっぱい。** · 2007/12/21(金) 02:21:54

>>617
ふつーに見かけるぞ? ＞awk256倍
しかしこの本が初心者向けかどうかはちと首をひねるがな。

**名無しさん＠お腹いっぱい。** · 2007/12/21(金) 14:28:09

すみません質問です。
ファイルにひとつフィールド列（固定文字）を足したいんですが、
while read do でループより簡潔に書きたいんです。
paste file1 file2　のfile1には固有文字を入れている感じです
お願いします

**名無しさん＠お腹いっぱい。** · 2007/12/21(金) 14:37:23

642です。
awkっての使えばいいことに気がつきましたすみません

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 00:04:45

「っての」と言う語感が無縁な事象に対してと思えるのに、
「気がつく」のだから、相当な洞察力だな。

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 00:20:23

このｽﾚ（というか板）、ひょっとして精神年齢が相当ひくい？
学校の宿題とか新人研修の課題を聞きに来る子供ばっかり？

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 01:56:01

>>645
つ鏡

**shell** · 2007/12/22(土) 12:45:37

shell初心者です。

変数 TODAY=20071212(任意指定)として1970-01-01 00:00:00基準からの
経過時刻を秒数で表示したいのですが、方法はありませんか？

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 12:46:41

つ date -d ... +%s

**shell** · 2007/12/22(土) 12:48:50

質問２つ目

text.txtに
11 11 11 111 222 333 E
33 44 666 6666 E
と２行記入しているのですが、これを１行ずつ変数に代入できるスクリプトはありますか？
行の空白は半角スペースで最後にEは表示されています。行中の文字は任意の文字列です。

**shell** · 2007/12/22(土) 12:49:54

dateは本日の日付を求めるshellじゃなかったでしたっけ？
自分で指定した日付で求めたいです。

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 12:59:52

つ man date -> "-d dateexpr" # MS-DOSかよ！＞本日の日付

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 13:08:24

>>650
「dateは本日の日付を求める…」違います。

せっかく >>648 で正解を教えてもらっているのに、礼も言わずに
そういうことを言う人には質問する権利はありません。

はい、次の方どうぞ
↓

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 13:10:36

$ cat /tmp/test.txt | while read str; do
> echo "[$str]"
> done
[11 11 11 111 222 333 E]
[33 44 666 6666 E]
$

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 13:12:04

>>649
つ read hoge; read fuga

**shell** · 2007/12/22(土) 22:55:46

今スレ開きました。
試してみます。

ありがとうございます。

「dateは本日の日付を求める…」違うですか...
調べます。

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 23:09:02

「開きました」ｷﾀｰ
何でもウィンドウの隠喩w

**名無しさん＠お腹いっぱい。** · 2007/12/22(土) 23:15:08

>>656
DOS時代（ニフ）の頃からある表現なので、
ファイルオープンからきた「開く」だと思ってたけど？違うの？

**名無しさん＠お腹いっぱい。** · 2007/12/23(日) 02:42:27

>>657
いちいち相手しないほうがいいっすよ。
貶すことしかできないやつってどこにでもいますから。
まあこういうやつに限って現実では貶されまくってるわけですけどね。

**名無しさん＠お腹いっぱい。** · 2007/12/23(日) 18:22:15

/home/hoge/fuga/
/home/hoge/fuga/.data
が本来セットであるはずなんですが、
設定ミスで、一部ユーザには
/home/hoge/fuga/
はあっても
/home/hoge/fuga/.data
がありません。

.dataが存在しないフォルダを簡単に調べる方法はないでしょうか。

**名無しさん＠お腹いっぱい。** · 2007/12/23(日) 19:03:27

>>659
for dir in /home/*/fuga
do
[ -f $dir/.data ] || echo $dir
done

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 08:08:48

文字列に対して、$oldから$newの置換をしたい場合、
echo $line|sed -e s/$old/$new/ だと、
$oldや$newが'/'を含んだ時にエラーになってしまうから、
bashの${line/$old/$new}を使ってしまうのだけど、
他にポータブルないい方法ないでしょうか。

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 08:33:45

変数がどの文字を含むか予め予期できないとなると、
「,」に逃げるとかはできないしな

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 10:22:22

コマンドインジェクション可能だから未検証の文字列をコマンドとしてsedに与えてはいけない。

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 12:30:10

うーん、そうなのですか。
line, old, newがそれぞれ実在のパス(フルパス、相対パス、パスの一部のいずれか)
だと保証できる場合はどうでしょうか。
そもそもsedだと置換え前の文字を正規表現と扱ってしまうから、
期待しないマッチングが発生する可能性もあるけれども。。。
適当なスクリプトに、3つの引数を与えて
その中で処理させたほうがいいのかなぁ。

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 14:16:55

実在のパスでも、Ctrl-A (0x00) 以外のすべての文字が
パスとして使用可能だからなぁ、、

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 14:50:27

>665
これ本当ですか？
Ctrl-Aと/以外はファイルやディレクトリ名に使えるってこと？
横から質問で申し訳ない

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 14:52:42

CTRL-Aは0x01なので嘘です。

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 14:59:37

CTRL+SPC

**名無しさん＠お腹いっぱい。** · 2007/12/24(月) 15:20:48

Ctrl+@だな。それ以外は本当。

**名無しさん＠お腹いっぱい。** · 2007/12/25(火) 17:49:34

ファイル名にCtrl+Gを含めたら、lsの度に激しくうるさい件について

**名無しさん＠お腹いっぱい。** · 2007/12/25(火) 18:00:35

?に置き換わってうるさくない件について

**名無しさん＠お腹いっぱい。** · 2007/12/26(水) 00:06:34

普通--show-control-charsって常に有効にするだろ

**名無しさん＠お腹いっぱい。** · 2007/12/26(水) 00:32:28

そんなls手が腐るから普通触らない。

**名無しさん＠お腹いっぱい。** · 2007/12/26(水) 03:49:58

半導体業界はcshスクリプトとかtclスクリプトばっか。
ときどき転職したくなる。

**名無しさん＠お腹いっぱい。** · 2007/12/26(水) 10:48:21

CADとかもtcl使っているの多いね。
プラグインとかだけでなく、サービス起動スクリプトまでtcl使っているのがあるし。

**名無しさん＠お腹いっぱい。** · 2007/12/26(水) 11:38:44

TCLは、もともと集積回路設計ツール内蔵スクリプト言語の
ベースとなる拡張可能なスクリプト言語として開発されたからね。
だから半導体の世界では多い。
独自言語使わないで済むのはTCLのおかげ。

Tkとくっついてから他の世界にも普及した。

**名無しさん＠お腹いっぱい。** · 2007/12/27(木) 11:54:46

すみません、
#!/usr/bin/ksh
PALALLEL(){
mp=$!; sp=$$
echo "ぱられる ${mp} ${sp}"
}

PALALLEL &
PALALLEL &

とやったとき最初のmpが取れないんですがどうするべき？

ご教示おねがいします

**名無しさん＠お腹いっぱい。** · 2007/12/27(木) 11:58:48

>>677
当たり前だろ。
最初のPALALLEL()にとっては、$!は存在しないから。

**名無しさん＠お腹いっぱい。** · 2007/12/27(木) 12:07:29

あ。、そうか（終了直後か
・・有難うございました（汗

**名無しさん＠お腹いっぱい。** · 2007/12/29(土) 19:59:29

ある環境変数が定義されているか否かを判定したいんですがどのように判定すればいいんでしょうか？
zshだとif [[ -z $EMACS ]]のようなやりかただと警告がでて嫌なのです

**名無しさん＠お腹いっぱい。** · 2007/12/29(土) 20:37:24

[ "${var+defined}" = "defined" ] && echo defined

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 02:56:40

あるファイルをgrepした結果を配列としてforeachに引き渡したいのですが、うまくいきません。

grepする内容
-------------------------------
ex xxx
aaa
ex yyy
bbb
ex zzz
-------------------------------
ここからexで始まる行のみをgrepで抽出する（xxx,yyy,zzzは同じディレクトリのメンバ名）

-------------------------------
ex xxx
ex yyy
ex zzz
-------------------------------

これをawkでメンバ名だけ抽出しfileに書き込む
awk '{print $2}' >file

各メンバの行数を表示
foreach i (file)
wc -l $i
end

とやるとfileの行数（この場合3）と出てしまいます。
本当はメンバxxx,yyy,zzzの行数を表示したいのですが、どのようにすればよろしいでしょうか？
fileにはメンバ名が出力されています。よろしくご教授ください。
tcshを使用しています。

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 04:59:50

`cat file`

既にcshで書かれたプログラムをメンテする必要があるとか、
cshが強制されてるでもなければ、
bshにしときなさい。

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 10:27:30

>>682
>>1
> ・csh/tcshのシェルスクリプトは推奨されません。
> (理由は「csh-whynot」でググれ)

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 10:37:16

682を見るにスクリプトを書くよりは対話的に使ってる上での質問じゃないかと
思うが。馬鹿の一つ憶えも程々にしてはどうか。

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 10:40:38

ならスレ違いだな。消えろ。

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 10:43:40

tcshで対話的といえば、foreachとかの対話的使いかたが分からん。
やむなく仕事でtcsh使ってるが、
ループ処理の時だけbash起動してる俺。

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 11:21:51

>>682
$ sh -c 'for i in `cat file`; do wc -l $i; done'

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 11:39:34

>>681
ありがとうございます
ぱっと見、なにが行われてるかよくわかりませんでしたが
一応bashのmanに載ってる書式なんですね

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 12:12:19

>>689
[[ -z "$EMACS" ]] でよかろう。

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 18:26:58

>>689
bash依存じゃない。POSIX準拠だ。

**682** · 2007/12/30(日) 22:03:40

682です。
皆様ありがとうございました。
仕事の環境がtcshを使うので>>1は読んでいましたが質問させていただきました。
また、対話形式でもなく（対話でもいいのですが）、スクリプトで実行したかったんです。
初心者の為、頂いた回答でも分らない部分がありますが、
年明け会社で試してみます。
ありがとうございました。

**名無しさん＠お腹いっぱい。** · 2007/12/30(日) 23:18:24

>>687
簡単な使い方の例を挙げると、

% foreach i ( * )
と入力すると、ループ中を示すプロンプトが出てくるので、
foreach? (ここで変数$iを使った文)
foreach? ：
foreach? end

みたいに実施する。

例えば拡張子が.logなファイルがある場所で、
% foreach i ( *.log )
foreach? echo "ファイル名 $i 、行数＝`wc -l $i`"
foreach? echo "--- 先頭10行 ---"
foreach? head $i
foreach? echo "--- 末尾10行 ---"
foreach? tail $i
foreach? end

こんなことするときに便利なりよ。

**名無しさん＠お腹いっぱい。** · 2007/12/31(月) 00:21:27

>>693
bashみたいに foreach i ( * ) ; do echo $i; end # do は要らないんだろうけど
みたいには使えないの?
強制的に対話モードになってしまうのが嫌なの。

**名無しさん＠お腹いっぱい。** · 2007/12/31(月) 16:44:41

>>690
それだと、$EMACS が空文字列の場合にも
未定義と判断されてしまう。

>>681 は、空文字列の場合でも、定義済みかどうかをちゃんと判断できる。

**名無しさん＠お腹いっぱい。** · 2008/01/04(金) 00:49:17

sedで "s/aaa/$bbb/" とした場合、$bbbの中に & があると
& が一致した箇所に置換されます
これを変数の中で bbb=\& とエスケープしないでそのまま置換させたいのですが
いい方法はないでしょうか？
またはsedじゃなくても正規表現を無視して置換するコマンドってあります?

**名無しさん＠お腹いっぱい。** · 2008/01/04(金) 18:00:48

シェルを使ってまだ1ヶ月ですが、宜しくお願いします。

やりたいことは1.5GBもあるファイルをgzipを使って圧縮したいのですが、
レンタルサーバーのため負荷が高いせいか途中でkillされてしまい、
圧縮が最後まで出来ません。何か解決策をご教授いただけないのでしょうか？
宜しくお願いします。
gzip fileName

**名無しさん＠お腹いっぱい。** · 2008/01/04(金) 18:10:12

>>697
分割して圧縮？

**名無しさん＠お腹いっぱい。** · 2008/01/04(金) 18:55:23

>>697
レンタル鯖のルールがよくわからんが、ファイルの大小に関係なくファイル圧縮の
CPU使用率なんてタカが知れているから、おそらくCPU時間を測っていて、タイムアウト的に
討ち取られていると思う（CPU負荷は小さいがCPU時間は長くなる）

というわけで>>698の言う通り、splitして分割圧縮するしかないな。

**名無しさん＠お腹いっぱい。** · 2008/01/04(金) 19:09:51

対話的なシェルの使い方はスレ違い。レン鯖板にでも行ってしまえ。

**名無しさん＠お腹いっぱい。** · 2008/01/04(金) 19:37:54

シェルにはＡシェル系、Ｂシェル系、Ｃシェル系、と種類があるようですが、
僕のPCのシェルはＸｔｅｒｍというものみたいです。
これは、シェル系に当てはめると何シェル系なんでしょうか？

**名無しさん＠お腹いっぱい。** · 2008/01/04(金) 19:39:36

釣りは他所でやれ、な？

**江戸っ子** · 2008/01/04(金) 21:34:59

んなこと知ぇるけぇー！

**名無しさん＠お腹いっぱい。** · 2008/01/04(金) 23:11:46

>>701
マジレスするとxtermはshellじゃない。

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 00:18:57

シェルにはＡシェル系、Ｂシェル系、Ｃシェル系、と種類があるようですが、
僕のPCのシェルはTeraTermというものみたいです。
これは、シェル系に当てはめると何シェル系なんでしょうか？

**次の患者さんどぞー** · 2008/01/05(土) 00:30:07

>>701
Ｘシェル

>>705
Ｔシェル

わからない場合はグーグルで検索して調べること

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 01:31:18

マジレスするとashもbsh系

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 08:59:59

>>697
ddで先頭から順に適当な長さずつ切り出しながら | gzip -c >> file.gz に繋ぐ。
dd if=file bs=適当 skip=0 count=1 | gzip -c > file.gz
dd if=file bs=適当 skip=1 count=1 | gzip -c >> file.gz
dd if=file bs=適当 skip=2 count=1 | gzip -c >> file.gz
...

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 09:05:05

>>706
せんせー、ktermは？

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 09:54:28

そのネタあんまりおもしろくないよ。

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 10:16:01

>>709
ひねりが足りない。

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 10:42:03

昭和シェルしか使ったこと無いな

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 17:02:33

スクリプトの中で

n=2 の時は
command "$1" "$2"
n=4 の時は
command "$1" "$2" "$3" "$4"
というように、変数nに応じて引数の数を変える処理をしたいと思ってます。
command "$1" ... "$n"
どうすれば実現できるでしょうか？

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 17:13:03

echo $#

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 17:13:27

って、command "$@" でいいんかな？

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 17:20:44

あるコマンドの引数に変数をしようとしているのですが、
'があるため展開されずに困っているのですが、
どうすればいいでしょうか？
----------------------------------------
hensu=123
command arg='${hensu}'
----------------------------------------

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 18:11:44

>>708
それ、gzファイルが切れ目なくくっついちゃって、解凍できなくないか？

**名無しさん＠お腹いっぱい。** · 2008/01/05(土) 18:17:37

>>716
'を使わない。

シェルスクリプト総合 その9

シェルスクリプト総合その9