シェルスクリプト総合 その7
■ このスレッドは過去ログ倉庫に格納されています
0001ミスターシェル
2006/09/07(木) 13:00:11スクリプトのお勉強・自慢・腕試しなどにどうぞ。
まずは注意点、リンク、地鎮祭など(>>1-6くらい)をご覧ください。
□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
Linuxユーザは/bin/shの正体がbashなので特に注意。
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
manや参考リンクを見ましょう。
aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルスクリプトのことをシェルってゆーな
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
RubyやPerlの方が適した仕事には素直にそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
0222名無しさん＠お腹いっぱい。
2006/10/25(水) 17:36:56まちがえた
0223名無しさん＠お腹いっぱい。
2006/10/25(水) 17:37:14それだと名前の順序が変わるから
> その最新日付のみを残して、他の重複行はすべて削除
を満たさない。
それと、uniq ではスキップするフィールドを指定するんだから uniq -2 だし、
uniq が削除するのは連続した場合だから名前フィールドでの sort も必要。
0224名無しさん＠お腹いっぱい。
2006/10/25(水) 17:38:32いや、uniq -3 は合ってるよ。1フィールドを追加してるから。
0225名無しさん＠お腹いっぱい。
2006/10/25(水) 17:41:18あ、そうか。ゴメン。
0226名無しさん＠お腹いっぱい。
2006/10/25(水) 17:44:00sort -nr | uniq -3 で最新日付だけ残して
最後に頭のフィールドを削除するのが奇麗だな。
0227名無しさん＠お腹いっぱい。
2006/10/25(水) 17:46:13頭のフィールドはuserだろう
0228名無しさん＠お腹いっぱい。
2006/10/25(水) 17:54:12確かに。時間毎にユーザーがバラバラな場合も考慮するとそうだな。
0229名無しさん＠お腹いっぱい。
2006/10/25(水) 18:24:51sed 's,^[[:space:]]*\([0-9][0-9]*\)[[:space:]]*\([0-9][0-9]*\)/\([0-9][0-9]*\)/\([0-9][0-9]*\)[[:space:]]*\([^[:space:]][^[:space:]]*\)[[:space:]]*\(.*\),\6 \4/\2/\3 \5 \1 \6,' | \
sort -r | uniq -4 | sort +3n | \
sed 's,^\([^[:space:]]*\)[[:space:]]*\([0-9][0-9]*\)/\([0-9][0-9]*\)/\([0-9][0-9]*\)[[:space:]]*\([^[:space:]][^[:space:]]*\).*,\4/\2/\3 \5 \1,'
0230名無しさん＠お腹いっぱい。
2006/10/25(水) 19:17:160231名無しさん＠お腹いっぱい。
2006/10/25(水) 19:25:04シェルスクリプトでの回答例が出ている後でそんなこと言っても，みっともないだけｗ
0232名無しさん＠お腹いっぱい。
2006/10/25(水) 19:28:24while read dt tm user; do
echo $dt $tm $user `date +%s -d "$dt $tm"` $user
done |sort -k 3 -r |uniq -4 |cut -d" " -f 1-3
0233名無しさん＠お腹いっぱい。
2006/10/25(水) 19:38:07date の -d オプションは標準ではない
入力ファイルの順序が保存されてない
0234名無しさん＠お腹いっぱい。
2006/10/25(水) 20:08:50dateを使わない方法は >>220 が示している。
入力ファイルの順序は、もともとの質問では問うていない。
0235名無しさん＠お腹いっぱい。
2006/10/25(水) 20:30:23> dateを使わない方法は >>220 が示している。
>>219-220 抜かしたらまとめにならんだろ。
> 入力ファイルの順序は、もともとの質問では問うていない。
元の質問は「他の重複行はすべて削除」ね。入力ファイルから重複行を削除した
ものは当然に入力ファイルの順序が保存されてる。
順序を変えていいのは順序は問わないと明記されてる場合だけ。
0236名無しさん＠お腹いっぱい。
2006/10/25(水) 20:44:28各ユーザ毎に最新時刻の行だけを抜き出したら、
それらの行全体が時刻順にソートされていた方が都合がいいだろう。
そういう意味でも、たまたま入力された順序にユーザーが並ぶ必要は全くない。
0237名無しさん＠お腹いっぱい。
2006/10/25(水) 21:17:5009/09/2001 00:00:00 "name"
09/10/2001 00:00:00 "name"
0238名無しさん＠お腹いっぱい。
2006/10/26(木) 00:59:01抽出させたい文字列が二つあります。
一回の sed で二つの出力を二つの変数に入れるのにはどうしたらいいですか？
なんか read を使えばできそうな感じなのですが、
なかなか難しくてできていません。
0239名無しさん＠お腹いっぱい。
2006/10/26(木) 01:48:30sed でどう出力するのか分からんけど
パイプを使って代入しても意味が無いから気をつけろ。
sed '処理' | read a b
とかやっても a や b の中身はパイプの中でしか
参照できない。
0240名無しさん＠お腹いっぱい。
2006/10/26(木) 01:53:16とかかね?
0241名無しさん＠お腹いっぱい。
2006/10/26(木) 02:09:020242238
2006/10/26(木) 03:53:46サブプロセスの中の変数にしか影響を与えない場合が
あるとかなんとかで(>>239 さんの言ってることですね)、
exec 使ってリダイレクションをかえるとかそういうのに挑戦しましたが
生半可な知識ではたちうちできず、
結局別の方法で逃げました。
>>240 さんの方法は今回は使えませんでしたが勉強になりました。
いやー難しい。
0243名無しさん＠お腹いっぱい。
2006/10/26(木) 08:14:10不思議だ
0244名無しさん＠お腹いっぱい。
2006/10/26(木) 09:40:15改良してまとめた
while read dt tm user; do
printf "%s %015d %s\n" $user `date +%s -d "$dt $tm"` $user;
done |sort -nr |uniq -2 |while read user sec user1; do
echo `date "+%m/%d/%Y %T" -d "1970-01-01 00:00:00 UTC $sec sec"` $user;
done;
0245名無しさん＠お腹いっぱい。
2006/10/26(木) 10:32:492 回目の read はいらんだろ。変換前の値もつけとけばいい。
しかし、なんで標準外の date の -d オプションにこだわるんだ?
while read dt tm user; do
tmp=${dt%/*}; x=${tmp#*/}
echo $user ${dt##*/}/${dt%%/*}/$x $tm $dt $tm $user
done | sort -r | uniq -f 5 | cut -d ' ' -f 4-
入力順も保存したいなら
cat -n |
while read num dt tm user; do
tmp=${dt%/*}; x=${tmp#*/}
echo $user ${dt##*/}/${dt%%/*}/$x $tm $num $dt $tm $user
done | sort -r | uniq -f 6 | sort -nk 4 | cut -d ' ' -f 5-
0246名無しさん＠お腹いっぱい。
2006/10/27(金) 22:48:53一方にしか存在しないフィールドはそのまま出力し、
それ以外は第二フィールドを B に変更したいのです。
例えば次のようなファイルを:
foo 0
bar 0
--
foo 1
qux 1
次のように:
foo 1
bar 0
qux 1
順序は不同なのでソートしちゃっても構いません。
どのような方法があるでしょうか?
0247名無しさん＠お腹いっぱい。
2006/10/27(金) 23:33:05uniq
uniq -d
を使って適当に。
0248名無しさん＠お腹いっぱい。
2006/10/28(土) 17:24:58join(1) あたりで出来るかと思ったんですが、いまいち上手くいかないorz
もう少し頑張ってみます。
0249名無しさん＠お腹いっぱい。
2006/10/28(土) 20:20:34sed -e "s/\([^ ]*\).*/& \1/;" |sort -r |uniq -3 |cut -d" " -f 1,3
0250名無しさん＠お腹いっぱい。
2006/10/29(日) 08:35:390251名無しさん＠お腹いっぱい。
2006/10/29(日) 09:16:24美容版の糞コテ「たお」は自慢大好き
その自慢もたいしたこと無いのに得意気で
見ててとても痛い糞コテ
批判に対しては必ず長レスで的外れに噛み付いてくる
とっても哀れなやつ
http://life7.2ch.net/test/read.cgi/diet/1158326490
0252名無しさん＠お腹いっぱい。
2006/10/30(月) 16:26:50mm=80; nn=3;
pp=`printf "%0${nn}d" 0`;
for ((aa=0; aa<$mm; aa++)); do
bb[$aa]=$pp$aa;
done;
for ((aa=-$nn; aa<0; aa++)); do
for ((aa1=0; aa1<$mm; aa1++)); do
echo -n ${bb[$aa1]:$aa:1};
done;
echo;
done;
0253名無しさん＠お腹いっぱい。
2006/10/30(月) 18:29:51脈絡なく何を言いたいかわからんが、
zsh依存乙。
bashですら動かない依存スクリプトは、Bourne-sh互換に書き直して出直すこと。
0255名無しさん＠お腹いっぱい。
2006/10/31(火) 01:16:24俺の環境ではこうなったが、これでいいのか？
00000000000000000000000000000000000000000000000000000000000000000000000000000000
00000000001111111111222222222233333333334444444444555555555566666666667777777777
01234567890123456789012345678901234567890123456789012345678901234567890123456789
$ bash --version
GNU bash, version 3.1.17(9)-release (i686-pc-cygwin)
0256名無しさん＠お腹いっぱい。
2006/11/01(水) 17:56:320257名無しさん＠お腹いっぱい。
2006/11/01(水) 18:10:02文字列でパイプライン組み立ててevalしる
0258名無しさん＠お腹いっぱい。
2006/11/02(木) 09:32:240259名無しさん＠お腹いっぱい。
2006/11/05(日) 01:14:11たとえば
% hoge /usr/local/bin
bin
% hoge ~/etc
etc
% pwd
/usr/local/bin
% hoge ..
local
みたいな。
0260名無しさん＠お腹いっぱい。
2006/11/05(日) 01:18:310261名無しさん＠お腹いっぱい。
2006/11/05(日) 01:23:010262名無しさん＠お腹いっぱい。
2006/11/05(日) 01:37:000263名無しさん＠お腹いっぱい。
2006/11/05(日) 13:35:39% echo $hoge:r
/usr/local/bin/allneeded
% echo $hoge:t
allneeded
csh/tcsh/zsh だがね。sh だったら basename だろ?
0264名無しさん＠お腹いっぱい。
2006/11/05(日) 13:42:200265名無しさん＠お腹いっぱい。
2006/11/05(日) 14:39:540266名無しさん＠お腹いっぱい。
2006/11/05(日) 18:18:110267名無しさん＠お腹いっぱい。
2006/11/05(日) 18:44:460268名無しさん＠お腹いっぱい。
2006/11/05(日) 18:49:290269名無しさん＠お腹いっぱい。
2006/11/05(日) 22:37:29↓
arg=/usr/local/bin
(IFS=/; set $arg; shift `expr $# - 1`; echo "$1")
0270名無しさん＠お腹いっぱい。
2006/11/06(月) 00:12:33たとえ意味がなくてもcdが外部コマンドとして存在「しなければならない」のと同じ。
だから、>>266-267,269の言ってることは意味がない。考えるだけ無駄。
0271名無しさん＠お腹いっぱい。
2006/11/06(月) 00:28:55どこの世界の話だ?
SUSv3:
> Since cd affects the current shell execution environment, it is always
> provided as a shell regular built-in.
0272名無しさん＠お腹いっぱい。
2006/11/06(月) 00:51:531.13 Built-In Utilities
However, all of the standard utilities, including the regular
built-ins in the table (中略) shall be implemented in a manner so that
they can be accessed via the exec family of functions as defined in
the System Interfaces volume of IEEE Std 1003.1-2001 and can be
invoked directly by those standard utilities that require it (後略)
0273名無しさん＠お腹いっぱい。
2006/11/06(月) 01:36:29そこで要求されてるのは
they can be accessed via the exec family of functions
つまり execve 等から呼出せれば外部コマンドである必要なんてない。
0274名無しさん＠お腹いっぱい。
2006/11/06(月) 01:39:020275名無しさん＠お腹いっぱい。
2006/11/06(月) 01:49:28というほどでもないのでは？外野ですが。
0276名無しさん＠お腹いっぱい。
2006/11/06(月) 02:03:21むしろ"shall be"という強い書き方に注目しないといけない。
んで、exec系の関数の説明には
The exec family of functions shall replace the current process image
with a new process image. The new image shall be constructed from a
regular, executable file called the new process image file.
と書いてあるわけだ。ちゃんと規格書をあたる点は誉めてやってもいいが、
かなり調べ方が足りないゾwwww
0277名無しさん＠お腹いっぱい。
2006/11/06(月) 02:29:570278名無しさん＠お腹いっぱい。
2006/11/06(月) 02:34:32cd が実行ファイルとして存在することを仮定してるんじゃないかな。
0279名無しさん＠お腹いっぱい。
2006/11/06(月) 02:45:36ていうか、それはもう>>272ですんだ話。
0280名無しさん＠お腹いっぱい。
2006/11/06(月) 03:25:250281名無しさん＠お腹いっぱい。
2006/11/06(月) 06:42:170282名無しさん＠お腹いっぱい。
2006/11/06(月) 08:51:00POSIXで決まってるからというのはなしね。なぜそう決めたかの背景を知りたい。
0283名無しさん＠お腹いっぱい。
2006/11/06(月) 09:49:49POSIXで誤ってそう決めてしまった、という説が有力。
後付けの言い訳としては、対象ディレクトリに実際に cdできるかどうかを
テストする目的で使える(返り値で結果判定)、と説明されているが、そんな例あまりないし、
内部コマンドの cdで、
(cd hoge) とやれば済む話。
0284名無しさん＠お腹いっぱい。
2006/11/06(月) 17:49:06#!/bin/sh
# $FreeBSD: src/usr.bin/alias/generic.sh,v 1.1 2002/07/16 22:16:03 wollman Exp $
# This file is in the public domain.
${0##*/} ${1+"$@"}
0285名無しさん＠お腹いっぱい。
2006/11/06(月) 18:31:56${1+"$@"} って、 "$@" だけでよくねぇ?
0286名無しさん＠お腹いっぱい。
2006/11/06(月) 23:17:07cdだけならそれでも説明はつくんだけど、外部コマンドとしても存在する
ビルトインコマンド(regular built-in utility)は、cdだけじゃないのがややこしいところ。
alias, bg, cd, command, false, fc, fg, getopts, jobs, kill, newgrp,
pwd, read, true, umask, unalias, wait
謎だよなあ… fcやcommandに至っては、何のために存在するのかすらわからない。
0287名無しさん＠お腹いっぱい。
2006/11/06(月) 23:33:120288名無しさん＠お腹いっぱい。
2006/11/06(月) 23:40:49もうちょっとやさしくして
0289名無しさん＠お腹いっぱい。
2006/11/06(月) 23:42:48(cronとか、inetdとかから直接起動されるとか、
env/nice/time/nohupとかの引数として起動するために外部である必要があるもの)
command, false, kill, newgrp, pwd, true
意味のない外部コマンド:
alias, bg, cd, fc, fg, getopts, jobs, read, umask, unalias, wait
0290名無しさん＠お腹いっぱい。
2006/11/06(月) 23:46:26配置するべきだ。/bin/[ はあるのだから。
0291名無しさん＠お腹いっぱい。
2006/11/06(月) 23:48:12教育上って、どういうこと？
0292名無しさん＠お腹いっぱい。
2006/11/06(月) 23:50:180293名無しさん＠お腹いっぱい。
2006/11/07(火) 01:39:010294名無しさん＠お腹いっぱい。
2006/11/07(火) 08:57:140295名無しさん＠お腹いっぱい。
2006/11/07(火) 18:29:53シェルの格納場所を取得できるような変数とかコマンドとか
誰か知りませんか？
0296名無しさん＠お腹いっぱい。
2006/11/07(火) 19:25:20cat /etc/shells
0297名無しさん＠お腹いっぱい。
2006/11/07(火) 20:11:550298名無しさん＠お腹いっぱい。
2006/11/07(火) 20:19:08whichは cshのコマンド。それを言うなら type。
typeでは、type shとかやって、/bin/sh とかの PATHは得られるけど、
「この OSにインストールされていて使えるシェルを調べたい」
という質問の回答としては不適当。
0299名無しさん＠お腹いっぱい。
2006/11/07(火) 20:26:51外部コマンドとして起動したwaitだと、どんな pidに対しても、
wait: pid 1234 is not a child of this shell
と言われるが、それに意味あるのか??
0300名無しさん＠お腹いっぱい。
2006/11/07(火) 22:14:520301名無しさん＠お腹いっぱい。
2006/11/07(火) 22:38:30つ言いだしっぺの法則。
0302名無しさん＠お腹いっぱい。
2006/11/08(水) 01:03:490303名無しさん＠お腹いっぱい。
2006/11/08(水) 01:13:19講師探してます
0304名無しさん＠お腹いっぱい。
2006/11/08(水) 01:13:34表示しない方法ってありますか？
/dev/null
は試してみましたが、無理でした。
0305304
2006/11/08(水) 01:14:060306名無しさん＠お腹いっぱい。
2006/11/08(水) 06:46:122>/dev/nullでどう
0307名無しさん＠お腹いっぱい。
2006/11/08(水) 08:01:42無理だろ
0308名無しさん＠お腹いっぱい。
2006/11/08(水) 08:39:00だから、 2> /dev/null でエラー表示消せるんだってすでに >>306 が言ってるだろ。
0309名無しさん＠お腹いっぱい。
2006/11/08(水) 09:15:34は実行しようとしているコマンドではなくシェルが出してるので、
/dev/null にリダイレクトしても消せない。
つーわけで、シェルの出力をリダイレクトしてやればいい。
sh -c 'hoge fuga' 2>/dev/null
0310名無しさん＠お腹いっぱい。
2006/11/08(水) 09:24:40欲嫁。
>>305 で bashだと言ってる。bashなら消せる。
bash$ hoge
hoge: command not found
bash$ hoge 2> /dev/null
bash$
0311名無しさん＠お腹いっぱい。
2006/11/08(水) 09:30:42execすれば同じプロセスだろ。どの程度意味があるかは俺にもよくわからんが(笑)
0312名無しさん＠お腹いっぱい。
2006/11/08(水) 09:39:50execしても、PIDが変わらないだけで別プロセス扱いになるので、
exec前にバックグラウンドで起動したプロセスを wait で待つことはできないよ。
0313名無しさん＠お腹いっぱい。
2006/11/08(水) 10:14:53ありゃーwaitpidはできたよなと思ってよく調べたらshellのwaitコマンドはシステムコール
呼ぶ前にチェックしてるのか(bash調べ)。知らんかった...
0314名無しさん＠お腹いっぱい。
2006/11/08(水) 17:15:17もっとシンプルor可搬性のある方法はあるでしょうか？
hoge=`stat -c %y FILENAME|sed -e 's/..\..*//' -e 's/-//g' -e 's/://g
' -e 's/ //g'`
touch -t "$hoge" FILENAME2
0315名無しさん＠お腹いっぱい。
2006/11/08(水) 17:20:32-r, --reference=FILE
use this file's times instead of current time
0316314
2006/11/08(水) 18:05:29というのが動機なので、それだとだめなのです。
0317名無しさん＠お腹いっぱい。
2006/11/08(水) 18:31:03編集してから更新時刻をコピーし戻せば？
0318名無しさん＠お腹いっぱい。
2006/11/09(木) 00:01:360319名無しさん＠お腹いっぱい。
2006/11/09(木) 00:06:46それだって touch -r で行けるじゃん。
$ touch -r hoge temp
$ vi hoge
$ touch -r temp hoge
$ rm temp
↑で、hogeを編集したあと、もとのタイムスタンプに戻せる。
0320名無しさん＠お腹いっぱい。
2006/11/09(木) 03:18:350321名無しさん＠お腹いっぱい。
2006/11/09(木) 09:36:02使えるはずなので、
hoge=`stat -c %Y FILENAME`
でとりだして
touch -d @$hoge FILENAME
とするのがシンプルじゃないか。
■ このスレッドは過去ログ倉庫に格納されています