シェルスクリプト総合 その19
■ このスレッドは過去ログ倉庫に格納されています
0001シェルスクリプトライター
2011/12/10(土) 20:06:40.38スクリプトのお勉強・自慢・腕試しなどにどうぞ。
□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
Linuxユーザは/bin/shの正体がbashなので特に注意。
FreeBSDユーザは/bin/shの正体がashなので注意。
v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/sh/
http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
manや参考リンクを見ましょう。
aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルスクリプトのことをシェルってゆーな
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
RubyやPerlの方が適した仕事には素直にそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
前スレ
シェルスクリプト総合 その18
http://hibari.2ch.net/test/read.cgi/unix/1308195527/
次スレは >>970 で。
0600名無しさん@お腹いっぱい。
2012/03/19(月) 20:04:56.950601名無しさん@お腹いっぱい。
2012/03/19(月) 20:08:20.980602名無しさん@お腹いっぱい。
2012/03/19(月) 21:12:40.160603名無しさん@お腹いっぱい。
2012/03/19(月) 22:06:26.63ttp://minnie.tuhs.org/cgi-bin/utree.pl?file=V7/usr/src/cmd/sh/mac.h
0604名無しさん@お腹いっぱい。
2012/03/20(火) 08:01:57.14のサイトに、
#!/bin/sh
read input
if [ $input = 'q' ]; then
echo QUIT
fi
と言うシェルスクリプトを参考に
if [ "$input" = 'q' ]; then
と $input をダブルクォートで囲めばよい。しかしまだ落とし穴はある。たとえば "!" を入力すると、
[: =: unexpected operator
とまたしてもエラーになってしまう。これは "$input" が "!" であるため、
if [ ! = 'q' ]; then
として扱われたからだ。
ってありますけれど、何度!を入力しても、
[: =: unexpected operator
って表示されません。
それに、
$ test !c = 'q' ; echo $?
test cd /etc = 'q' ; echo $?
test: too many arguments
とエラーが表示されます。
どのような解釈をすると、!cがtest cd /etcに置換されるのでしょうか?
0605名無しさん@お腹いっぱい。
2012/03/20(火) 09:04:17.23これはそのように解釈するtestもあるから注意しろ。くらいでいいと思う。
> どのような解釈をすると、!cがtest cd /etcに置換されるのでしょうか?
ヒストリ置換だろ。
0606名無しさん@お腹いっぱい。
2012/03/20(火) 17:36:56.09今の時代、そのエラーが出るshを使っている人、いるのかね?
0607名無しさん@お腹いっぱい。
2012/03/20(火) 17:41:15.64[ ! = ! ]
[ [ = [ ]
[ ] = ] ]
[ = = = ]
[ -f = -f ]
など、すべて文字列の比較として期待通りに動作する
0608名無しさん@お腹いっぱい。
2012/03/20(火) 17:51:22.47#!/bin/bashとか書いてるのに
0609名無しさん@お腹いっぱい。
2012/03/20(火) 19:57:58.150610名無しさん@お腹いっぱい。
2012/03/20(火) 21:45:56.600611名無しさん@お腹いっぱい。
2012/03/20(火) 23:34:08.600612名無しさん@お腹いっぱい。
2012/03/21(水) 09:04:25.40どうインジェクションするか解説お願いします
0613名無しさん@お腹いっぱい。
2012/03/21(水) 10:08:32.370614名無しさん@お腹いっぱい。
2012/03/21(水) 10:47:17.62case "$hoge" in
yes) ...;;
esac
って書くよね、ふつー。[Yy][Ee][Ss] なんかに変えるのも簡単だし。
0615名無しさん@お腹いっぱい。
2012/03/21(水) 11:14:27.91>>610はダブルクオートで囲ってるから、[コマンドの第一引数として$hogeの中身が渡るんで、そのhogeの値はそのまま[コマンドが解釈する。
どうあがいてもインジェクションなんて無理だと思うんだが。
0616名無しさん@お腹いっぱい。
2012/03/21(水) 11:26:14.79もうカンベンしてやれ。
0617名無しさん@お腹いっぱい。
2012/03/21(水) 12:19:06.390618名無しさん@お腹いっぱい。
2012/03/21(水) 13:26:55.780619名無しさん@お腹いっぱい。
2012/03/21(水) 13:38:09.350620名無しさん@お腹いっぱい。
2012/03/21(水) 14:28:05.05座布団
0621名無しさん@お腹いっぱい。
2012/03/21(水) 15:37:01.150622名無しさん@お腹いっぱい。
2012/03/21(水) 19:24:26.73$ busybox ash
$ hoge=!
$ if [ "$hoge" = 'q' ]; then echo QUIT; fi
ash: q: unknown operand
0623名無しさん@お腹いっぱい。
2012/03/21(水) 22:56:44.16に
>シェルスクリプトに制御構文が増えることを極力避けるように様々な工夫をしている。
>制御構文を避ける理由はコードが読みにくくなるためだ。
>これまで制御構文whileやforのはずし方について書いてきた。
>処理速度を高速化するためにwhileやforをコマンドに置き換えるというのは、
>それなりの効果が期待できる方法だ。
>シェルスクリプトに制御構文であるforやwhileが出てきたら、
>何か避ける方法がないか探してみるとより高速なスクリプトが書けるようになるかもしれない。
ってかいてあって、いろんな例が書いてあったり、
変なパッケージ(python製)を入れて、そのコマンドを使ったりしてるんですね。
僕は制御構文外すと逆に可読性がおちたり、
pythonで書かれたコマンドを呼び出すより、シェルスクリプトで制御構文書いた方が
早いと思うんですけど、おかしいですかね?
0624名無しさん@お腹いっぱい。
2012/03/21(水) 23:01:45.31以下のようなファイルがあるとします。
-----------------
1. aaa hello
2. bbb
3. ccc
4. ddd hello
5. ddd hello
6. eee hello
-----------------
このファイルの2行目から5行目に限定して、helloをgood byに変更したいです。
どのようなやりかたがありますでしょうか?
sedを使えばいいのかなと思うのですが。。
0625名無しさん@お腹いっぱい。
2012/03/21(水) 23:09:05.420626名無しさん@お腹いっぱい。
2012/03/21(水) 23:34:20.22うん、sedの超基本的な使い方で出来る
0627名無しさん@お腹いっぱい。
2012/03/21(水) 23:34:53.130628名無しさん@お腹いっぱい。
2012/03/21(水) 23:41:30.82そのページを見て思ったことは、xargsは便利だね、くらい
0629名無しさん@お腹いっぱい。
2012/03/22(木) 00:58:20.98シェルスクリプトに限らず、プログラム書く時に(一部の)制御構文を使わないってのは個人的に良くやる。効率とか性能とか抜きで。
ゲームの縛りプレイみたいなもんだけど、意外なテクニックを発見したりできて楽しめるよ。おすすめ。
上司や同僚に見つかったら>>623のサイトみたいな適当なウンチクで誤魔化せばOK。
0630名無しさん@お腹いっぱい。
2012/03/22(木) 01:14:19.58sed で 2行目から5行目は 2,5。
hello を good byに置換するには s/hello/good by/
接続すると 2,5s/hello/good by/
0631名無しさん@お腹いっぱい。
2012/03/22(木) 02:23:18.01BASICのころはあったけどな。
if文分岐とかで速度差が出ないようにするとかで。
今はそういうのする必要ないけど。
0632名無しさん@お腹いっぱい。
2012/03/22(木) 08:22:33.32感じるものさ
0633名無しさん@お腹いっぱい。
2012/03/22(木) 08:28:41.720634名無しさん@お腹いっぱい。
2012/03/22(木) 09:18:49.180635名無しさん@お腹いっぱい。
2012/03/22(木) 09:56:14.040636名無しさん@お腹いっぱい。
2012/03/22(木) 11:24:16.01基本動作はキューなんですが、
1 2 3
↓1を実行
2 3
1 2 3
↓2を実行
1 3
としたいです
unset 配列[N]でインデックスを詰めてくれればこんなの楽勝なのに…
0637名無しさん@お腹いっぱい。
2012/03/22(木) 11:37:02.12ファイルにしたらいい
0638名無しさん@お腹いっぱい。
2012/03/22(木) 20:00:10.46$ set -- 1 2 3 4
$ shift
$ echo $@
2 3 4
$ set -- 1 2 3 4
$ set -- $1 ${@:3}
$ echo $@
1 3 4
0639名無しさん@お腹いっぱい。
2012/03/22(木) 20:22:13.25unset array[N] で要素をunsetした後に、
array=(${array[@]}) でセットしなおせばインデックスは詰まる。
>>638 とは違って位置パラメータを壊さずに済む。
0640名無しさん@お腹いっぱい。
2012/03/22(木) 21:29:35.34かっこういい
0641名無しさん@お腹いっぱい。
2012/03/23(金) 22:05:53.20・ファイルを指定フォルダ内へコピー
・同名ファイルが存在する場合は、
既に存在するファイル名を「ファイル名 (1)」へ変更し、
既に「ファイル名 (1)」が存在しているのであれば、
それをさらに「ファイル名 (2)」へ変更し、、、(繰り返し)
というシェルスクリプトを書きたいんですが、
既に「ファイル名 (*)」が存在する場合に*の数字を
どのようにすれば知ることができますか?
*さえ知れたらexprを使えば出来るとは思うのですが...
アドバイスお願いします。
0642名無しさん@お腹いっぱい。
2012/03/23(金) 22:27:01.94逆に考える。
変数iとかに1を入れておいて、
"ファイル名($i)" が存在したら
iをインクリメントして "ファイル名($i)" にリネームする。
0643名無しさん@お腹いっぱい。
2012/03/23(金) 22:28:54.510644名無しさん@お腹いっぱい。
2012/03/23(金) 22:32:05.36i=1; while [ -f "file($i).txt" ]; do i=`expr $i + 1`; done; echo $i
0645名無しさん@お腹いっぱい。
2012/03/23(金) 22:52:22.200646名無しさん@お腹いっぱい。
2012/03/23(金) 22:56:33.590647名無しさん@お腹いっぱい。
2012/03/24(土) 01:18:46.160648名無しさん@お腹いっぱい。
2012/03/24(土) 10:30:46.53つまりアヌスを知りたいと……教えてあげよう
0649名無しさん@お腹いっぱい。
2012/03/24(土) 18:23:06.74実機が無いので試せないけど・・・
第一引数:コピー対象ファイル名(絶対パス指定)
第二引数:コピー先ディレクトリパス
#!/bin/ksh
FILE_NAMEW=`basename ${1}`
COUNT=1
TARGET_FILE=${2}/${FILE_NAME}
if [[ -e ${TARGET_FILE} ]]; then
while true
do
if [[ -e "${TARGET_FILE}(${COUNT})" ]]; then
COUNT=`expr ${COUNT} + 1`
else
cp ${1} ${TARGET_FILE}(${COUNT})
break
fi
done
else
cp ${1} ${TARGET_FILE}
fi
exit 0
0650名無しさん@お腹いっぱい。
2012/03/24(土) 18:40:54.370651名無しさん@お腹いっぱい。
2012/03/24(土) 18:48:18.47第1引数: コピー元ファイル(絶対/相対path関係なし)
第2引数: コピー先ファイル(ディレクトリではない)
#!/bin/sh
FILE=$2
if [ -f "$FILE" ]; then
i=1
while [ -f "$FILE($i)" ]; do
i=`expr $i + 1`
done
FILE="$FILE($i)"
fi
cp "$1" "$FILE"
0652641
2012/03/24(土) 21:11:20.76642さんの意見を参考に書いていたら、
651さんとほぼ同じようなものが書けました。
勉強になりました!
0653名無しさん@お腹いっぱい。
2012/03/24(土) 22:20:08.70みんなも勉強になるんだけどなぁ
0654名無しさん@お腹いっぱい。
2012/03/24(土) 22:34:45.96[ -e "$2" ]&&{ i=0; while [ -e "$2($((++i)))" ];do :;done; set "$1" "$2($i)";}
cp "$1" "$2"
0655名無しさん@お腹いっぱい。
2012/03/25(日) 10:39:31.72ってどういう風に解釈すれば良いんですか?
-- って正規表現ですか?
*はファイル名ですか?
0656名無しさん@お腹いっぱい。
2012/03/25(日) 10:59:50.45その * は glob。シェルが解釈する。
シェルが展開して rm に渡す。
-- は正規表現でも何でもなくて、ただの --。
シェルは特に何もしない。
そのまま rm に渡される。
0657名無しさん@お腹いっぱい。
2012/03/25(日) 11:00:45.800658名無しさん@お腹いっぱい。
2012/03/25(日) 11:28:39.15マッチしたときのための策だな。
0659名無しさん@お腹いっぱい。
2012/03/25(日) 11:51:49.520660名無しさん@お腹いっぱい。
2012/03/25(日) 12:14:56.30調べたらBSD系はgetopt(3)つこうてるから--大丈夫だよと書いてあったんだけど
他のUNIXはまた違うの?
0661名無しさん@お腹いっぱい。
2012/03/25(日) 12:24:48.030662名無しさん@お腹いっぱい。
2012/03/25(日) 13:38:40.680663名無しさん@お腹いっぱい。
2012/03/25(日) 13:56:37.10将来は -- が使えなくなるので注意、と書いてあるね。
0664名無しさん@お腹いっぱい。
2012/03/25(日) 18:55:04.62rm ./*
みたいにすれば引数の先頭が - になることはない。
--が使える保証がなければこっちで。
0665名無しさん@お腹いっぱい。
2012/03/25(日) 20:43:30.34で、-- が使えない ln で、-sという名前を指しているsymlinkを作ろうと、
ln -s ./-s hoge ってやると、hoge -> ./-s というsymlinkができて、
symlink自体に ./ が含まれてしまって美しくない。
-- が使えない条件で 、hoge -> -s は作れないものか。
0666名無しさん@お腹いっぱい。
2012/03/25(日) 22:24:57.35じゃあ全部スクリプトでやれよみたいな話になりかねんからダメかね
0667名無しさん@お腹いっぱい。
2012/03/25(日) 23:41:27.50昔からUnixやってる奴は普通そのやり方だよな
--指定してても、引数に./*でなく*を指定するのは違和感を感じる
0668名無しさん@お腹いっぱい。
2012/03/26(月) 06:20:04.43「◯◯◯.png」というファイルを見つけました
と表示させたいのですが、なるべくコンパクトにするにはどのようにすればいいでしょうか?
自分のやり方だとbasenameで失敗してうまく表示されません
あと、そのフォルダにpngファイルがなかった場合は何も表示しないようにしたいです。
find ${DIR}/ -name "*.png" -exec echo "「`basename {}`」というファイルを見つけました" \;
0669名無しさん@お腹いっぱい。
2012/03/26(月) 06:44:41.40find "$DIR" -name '*.png' -printf '「%f」というファイルを見つけました¥n'
0670名無しさん@お腹いっぱい。
2012/03/26(月) 07:06:33.81`basename {}`はfind実行より先に展開されてしまうので、
{}という文字列のbasenameが実行されて無意味になっているのが原因。
GNU findなら >>669 でよし。
0671名無しさん@お腹いっぱい。
2012/03/26(月) 07:46:41.98find "$DIR" -name '*.png' -exec sh -c 'for f;do echo 「`basename "$f"`」というファイルを見つけました;done' - {} +
0672名無しさん@お腹いっぱい。
2012/03/26(月) 14:20:40.93おかげさまでできました!
ありがとうございました!!
0673名無しさん@お腹いっぱい。
2012/03/27(火) 22:52:24.44開始日付と終了日付を指定したら、その間の日付を出力するスクリプトを作りたいです。
イメージとしては以下のような感じです。
$ ./hoge.sh -s 20120301 -e 20120303
20120301
20120302
20120303
以下の処理までは作ったのですが、ここから先が思いつきません。
---------------------------------------------
$ cat hoge.sh
#!/bin/sh
while getopts s:e: option
do
case $option in
"s")
start_date=$OPTARG
;;
"e")
end_date=$OPTARG
;;
*)
;;
esac
done
---------------------------------------------
よろしくご教示お願いします。
0674名無しさん@お腹いっぱい。
2012/03/27(火) 23:18:59.00perlとか使っちゃう。
0675名無しさん@お腹いっぱい。
2012/03/27(火) 23:30:44.14dateをつかってこんな感じかな
ステップ1. 今日の日付を20120301のように出力しよう
ステップ2. 20120301のような日付を、UTCエポックからの秒数に換算しよう
ステップ3. UTCエポックからの秒数を、20120301のような日付に変換しよう
ステップ4. 20120301のような日付を受け取り、その翌日の日付を出力しよう
ステップ5. ループを回して指定範囲の日付を全て出力しよう
※UTCエポックは 1970-1-1 00:00:00 UTC
0676名無しさん@お腹いっぱい。
2012/03/27(火) 23:42:28.28bash、GNU date依存
#!/bin/bash
while getopts s:e: opt; do
case "${opt}" in
's') stime=$(date -d "${OPTARG}" '+%s') ;;
'e') etime=$(date -d "${OPTARG}" '+%s') ;;
esac
done
t=${stime}
while (( ${etime} >= ${t} )); do
date -d @${t} '+%Y%m%d'
t=$(( ${t} + (60 * 60 * 24) ))
done
0677名無しさん@お腹いっぱい。
2012/03/28(水) 00:15:25.48bashならこっち
for (( t = stime; etime >= t; t += 60 * 60 * 24 )); do
date -d @${t} '+%Y%m%d'
done
0678676
2012/03/28(水) 00:53:33.920679名無しさん@お腹いっぱい。
2012/03/28(水) 06:47:17.46そんな中、何の解答にもヒントにもなってない >>675 って・・・
0680名無しさん@お腹いっぱい。
2012/03/28(水) 06:56:04.85わざわざepochからの秒数に直さなくても、日付だけで行けるよ。
#!/bin/bash
while getopts s:e: opt; do
case $opt in
s) stime=$OPTARG;;
e) etime=$OPTARG;;
esac
done
for ((t = stime; etime >= t; t=$(date -d "$t 1 day" '+%Y%m%d'))) {
date -d "$t" '+%Y%m%d'
}
0681名無しさん@お腹いっぱい。
2012/03/28(水) 07:04:16.81forループ中、dateが1回無駄になってる。せっかく$tに入ってるのでそれ使え。
for ((t = stime; t <= etime; t=$(date -d "$t 1 day" '+%Y%m%d'))) {
echo "$t"
}
0682680
2012/03/28(水) 07:10:47.880683名無しさん@お腹いっぱい。
2012/03/30(金) 14:34:15.36かっこいい方法ありますか?
0684名無しさん@お腹いっぱい。
2012/03/30(金) 14:51:40.880685名無しさん@お腹いっぱい。
2012/03/30(金) 14:55:44.65#!/bin/sh
while IFS= read -r line; do
echo "`date`: $line"
done
0686名無しさん@お腹いっぱい。
2012/03/30(金) 15:42:18.34ありがとうございます
0687名無しさん@お腹いっぱい。
2012/03/30(金) 15:44:45.94ヽ(・ω・)/ ズコー
\(.\ ノ
、ハ,,、  ̄
 ̄
0688名無しさん@お腹いっぱい。
2012/03/30(金) 16:39:16.720689名無しさん@お腹いっぱい。
2012/03/30(金) 16:44:05.09誰かパッチを送れよ。
0690名無しさん@お腹いっぱい。
2012/03/30(金) 17:35:02.11command > $(date +%Y%m%d)
って意味かとオモタ
0691名無しさん@お腹いっぱい。
2012/03/30(金) 18:02:04.91目的はロギングだな、と想像できれば、毎行にタイムスタンプつけたいんだな
ということもわかる
0692名無しさん@お腹いっぱい。
2012/03/30(金) 18:09:51.47目的はロギングだな、と想像できれば、ログファイル名毎に日付を入れたいんだな
と考えるのが自然
0693名無しさん@お腹いっぱい。
2012/03/30(金) 18:15:31.040694名無しさん@お腹いっぱい。
2012/03/30(金) 18:27:01.79touch -t YYMMDDhhmm /dev/stdout
って意味かとオモタ
0695名無しさん@お腹いっぱい。
2012/03/31(土) 01:35:03.440696名無しさん@お腹いっぱい。
2012/03/31(土) 04:56:25.930697名無しさん@お腹いっぱい。
2012/03/31(土) 17:23:45.97それだと、1900年とかそれ以前とか、32bit版の場合の2038年以降が動かないし、
GNU dateに依存するのもいやだし、
dateコマンドに頼らずに20120301等のの数字を直接操作して計算する方法ないですか?
0698名無しさん@お腹いっぱい。
2012/03/31(土) 17:42:14.02月の長さや閏年とか考えると、GNU dateかLL使うのがいいですよ。
コマンド組み合わせるのがシェルの得意なところだし。
■ このスレッドは過去ログ倉庫に格納されています