シェルスクリプト総合 その24©5ch.net
■ このスレッドは過去ログ倉庫に格納されています
0001名無しさん@お腹いっぱい。 転載ダメ©2ch.net
2014/11/11(火) 00:54:03.43□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
FreeBSDユーザは/bin/shの正体がashなので注意。
v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/sh/
http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
manや参考リンクを見ましょう。
aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆーな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
「そういうのはperl使いましょう」と回答するのはやめましょう。
安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
前スレ
シェルスクリプト総合 その23
http://peace.2ch.net/test/read.cgi/unix/1404204950/
0278名無しさん@お腹いっぱい。
2015/01/30(金) 20:00:01.61Historical implementations of `sleep' have required that NUMBER be
an integer, and only accepted a single argument without a suffix.
However, GNU `sleep' accepts arbitrary floating point numbers (using a
period before any fractional digits).
0279名無しさん@お腹いっぱい。
2015/01/30(金) 21:57:35.82おお、サンクス
0280名無しさん@お腹いっぱい。
2015/01/31(土) 12:09:54.06客先環境での操作なんかだとおおいにある
xargsなら、-pとか-tがあるので安心
0281名無しさん@お腹いっぱい。
2015/01/31(土) 13:19:36.31同意が得られて異端じゃないと安心出来た
尚就職してから今まで客先環境でしか働いたことがない模様
0282名無しさん@お腹いっぱい。
2015/01/31(土) 17:47:20.57v=${v:-default}
こうでしょ
: ${w:=default}
っていうの有りますか?皆さんの、そういうの教えて下さい
0283名無しさん@お腹いっぱい。
2015/02/01(日) 00:46:16.74echo -e 'hoge\nfuga'
こうでしょ
printf 'hoge\nfuga\n'
0284名無しさん@お腹いっぱい。
2015/02/01(日) 00:47:04.510285名無しさん@お腹いっぱい。
2015/02/01(日) 07:05:52.050286名無しさん@お腹いっぱい。
2015/02/01(日) 13:49:52.79OSX の /bin/sh は bash だけど、同じ bash のはずなのに
bash -c "echo -e 'hoge\nfuga'" と sh -c "echo -e 'hoge\nfuga'" で
結果が違うとかめんどくさすぎる。
0287名無しさん@お腹いっぱい。
2015/02/01(日) 18:28:40.97こうじゃなくて
function f () {
echo hoge hoge
}
こうでしょ
f () {
echo hoge hoge
}
0288名無しさん@お腹いっぱい。
2015/02/01(日) 19:10:32.63最近やってるのがjavascriptだからかな
0289名無しさん@お腹いっぱい。
2015/02/02(月) 10:43:19.51個人的には環境変数と区別するために小文字なんだけど、
社内の他の人が書いたのを見ると大文字ばっかりなんだよな。
0290名無しさん@お腹いっぱい。
2015/02/02(月) 12:18:06.010291名無しさん@お腹いっぱい。
2015/02/02(月) 21:56:58.79linux mint 17.1 でコマンドの練習してるのですが、
% ls -l
だと色々ずらーっと出るんですけど、本に書いてあるとおり、
ソートコマンドを練習しようとして
% ls -l | sort +4
と打ち込んでファイルサイズで降順ソートしたかったのですが
sort: cannot read: +4: そのようなファイルやディレクトリはありません
と出てしまいます。
bashですが、シェルの種類によってはこのオプション使えないんでしょうか。
-r等は正常に動作します。
0292名無しさん@お腹いっぱい。
2015/02/02(月) 22:04:13.81sort -k4r
0293名無しさん@お腹いっぱい。
2015/02/02(月) 22:34:00.270294名無しさん@お腹いっぱい。
2015/02/03(火) 03:09:11.93sort +4と同じ指定はsort -k5
たぶんls -lでファイルの所有者が全て同じで、できたと勘違いしてる
--debugオプションをつけるとわかりやすい
https://www.gnu.org/software/coreutils/manual/html_node/sort-invocation.html
> On older systems, sort supports an obsolete origin-zero syntax ‘+pos1 [-pos2]’ for specifying sort keys.
> The obsolete sequence ‘sort +a.x -b.y’ is equivalent to ‘sort -k a+1.x+1,b’ if y is ‘0’ or absent,
> otherwise it is equivalent to ‘sort -k a+1.x+1,b+1.y’.
sort +4という古いオプションの扱いはPOSIXのバージョンによるってことかな
https://www.gnu.org/software/coreutils/manual/html_node/Standards-conformance.html#Standards-conformance
0295名無しさん@お腹いっぱい。
2015/02/03(火) 06:48:02.67$ ls -l --sort=size
or
$ ls -lS
でええじゃまいか
0296名無しさん@お腹いっぱい。
2015/02/03(火) 08:37:05.99http://linuxjm.sourceforge.jp/info/GNU_coreutils/coreutils-ja.html
http://linuxjm.sourceforge.jp/info/GNU_coreutils/coreutils-ja_15.html#Standards-conformance
0297確認不足だった orz
2015/02/03(火) 08:40:20.78( 検索結果で上位に上がると期待して ) 日本語訳を貼り付けておきます
http://linuxjm.sourceforge.jp/info/GNU_coreutils/coreutils-ja_15.html#Standards-conformance
http://linuxjm.sourceforge.jp/info/GNU_coreutils/coreutils-ja_43.html#sort-invocation
0298名無しさん@お腹いっぱい。
2015/02/04(水) 22:55:20.92おお、infoの日本語訳できたんだ
man on WWWのように検索できるとさらにいいね
0299名無しさん@お腹いっぱい。
2015/02/08(日) 15:04:24.54何か簡単に管理する方法がありませんかね?
0300名無しさん@お腹いっぱい。
2015/02/08(日) 15:06:57.37vimのUnite historyの様なgrep効くから、それで呼ぶか
編集して完成させる
0301名無しさん@お腹いっぱい。
2015/02/08(日) 16:40:17.45anything.elみたいなヒストリーサーチみたいですね。
bashなのでどうしたものか。
0302名無しさん@お腹いっぱい。
2015/02/09(月) 09:34:08.43aliasじゃないの?
0303名無しさん@お腹いっぱい。
2015/02/09(月) 10:04:38.990304名無しさん@お腹いっぱい。
2015/02/09(月) 18:00:27.27ぼくの書いたスクリプトが動かないなんてけしからん(´・ω・`)
シェルの方を治したまえ
0305名無しさん@お腹いっぱい。
2015/02/09(月) 18:21:02.80declare -A URL
URL=(
["Vim_part24"]="http://peace.2ch.net/test/read.cgi/unix/1413122189/"
["vim_part5"]="http://anago.2ch.net/test/read.cgi/software/1379912425/"
)
# ping for download
ping_error=0
for i in ${!URL[@]}
do
# ping ${URL[$i]} > /dev/null
ping -n 1 `echo ${URL[$i]} | awk -F"/" '/http/{print $3}'` > /dev/null
if [ "$?" -ne 0 ]; then
echo "${i} : can not contact ${URL[$i]}"
ping_error=1
fi
done
0306名無しさん@お腹いっぱい。
2015/02/09(月) 18:41:13.94pingのコマンドオプションって統一されてないよなぁ
0307名無しさん@お腹いっぱい。
2015/02/09(月) 19:27:08.45#!/bin/sh
url_list='
Vim_part24 http://peace.2ch.net/test/read.cgi/unix/1413122189/
vim_part5 http://anago.2ch.net/test/read.cgi/software/1379912425/
'
ping="ping -w 3 -c 1"
echo "$url_list" | while read thr url __; do
case "$url" in
https?://*)
host=`echo $url | cut -d/ -f3`
if ! $ping $host >/dev/null; then
echo "$thr: cannot contact $url"
err=1
fi
;;
esac
done
exit $err
0308名無しさん@お腹いっぱい。
2015/02/09(月) 19:28:49.19http://*|https://*|ftp://*)
だな。
0309名無しさん@お腹いっぱい。
2015/02/09(月) 19:33:01.270310名無しさん@お腹いっぱい。
2015/02/09(月) 19:34:49.220311名無しさん@お腹いっぱい。
2015/02/09(月) 19:39:42.45これって、どこかに由来する文化なのかな?
(cronを「くーろん」と呼ぶみたいな?いや、これは違うかな……)
0312名無しさん@お腹いっぱい。
2015/02/09(月) 19:43:34.71サンキュー
windowsのsystem32/ping.exeが呼ばれてた
そりゃ移植性がないわけだ
>>307-308
コードありがとう
>>310
-Tオプションなんてあったのか
>>309
pingで鯖落ちてないか検査した後w3mで複数のURLから取ってきて
スレの上下の不要な広告など取り除いてから git commit して
その差分見るから
全部安全に通信できるか見てからやらないと、差分の時にちょっと問題になる
通信できなかったスレがマイナス差分で大量表示されたり、
次回は大量追加されたり
git reset hard HEAD~ するぐらいならあらかじめ通信検査してからやろうと思った
0313名無しさん@お腹いっぱい。
2015/02/09(月) 19:45:19.02それもあるし、どれかひとつでもエラーでping_error=1だからサーバの状態を確認してる感じがしない
0314名無しさん@お腹いっぱい。
2015/02/09(月) 19:47:43.57echo ... | {
while read ... do
...
done
exit $err
}
0315名無しさん@お腹いっぱい。
2015/02/09(月) 20:32:51.35> -Tオプションなんてあったのか
通信系のコマンドで、タイムアウトが指定できないものはスクリプトからは利用しないとか、
そういうことは考えないで作っちゃうタイプの方ですか?
ちなみに、大抵の通信系コマンドはタイムアウトが指定できるような気がする。
0316名無しさん@お腹いっぱい。
2015/02/09(月) 20:46:31.700317名無しさん@お腹いっぱい。
2015/02/09(月) 21:22:03.82> >>299
> aliasじゃないの?
長いワンライナーは場面ごとに手直しする必要のあることが多いから、
それだと融通がきかないことがありませんか?
0318名無しさん@お腹いっぱい。
2015/02/09(月) 22:07:20.56いろいろやり方はあるだろうけど、自分の場合は
libwww-perl(debian系)に入ってるHEADコマンドで.datファイルのLast-Modifiedフィールドみたいなのを見てる
0319名無しさん@お腹いっぱい。
2015/02/10(火) 06:45:24.43ここに書いてる奴本人じゃね?w
0320名無しさん@お腹いっぱい。
2015/02/10(火) 06:59:04.70XP じゃね?
毎回設定してたような気がする
2K は忘れた
0321名無しさん@お腹いっぱい。
2015/02/10(火) 07:03:40.32ダイヤルアップとかで最初の接続に時間がかかるから ping でネットワーク接続してから、おもむろに目的のアプリケーションで接続するって言うのがあったような気がする
0322名無しさん@お腹いっぱい。
2015/02/10(火) 10:03:19.02ping打っているかどうか確認してるんじゃ?
>>321
ちょっと違うけど自動切断有効にしてて切れてほしくないときに
ping打ちっぱなしにしてたな
0323名無しさん@お腹いっぱい。
2015/02/10(火) 10:06:07.01差分は取得しないのか
0324名無しさん@お腹いっぱい。
2015/02/10(火) 10:12:53.450325名無しさん@お腹いっぱい。
2015/02/10(火) 10:32:51.28切り分けといっても、pingが成功したらネットワーク的に問題ないとは言えないわけで……
対話環境で作業している時だったら、お手軽だから「まずping打ってみるか」というのは
分かる気がするけど、スクリプトの場合では中途半端なように思えます。
「ICMPは通るね」というのをスクリプト中から確認できても、それほど嬉しくはないよね?
0326名無しさん@お腹いっぱい。
2015/02/10(火) 10:41:38.26正しい汚染チェックってどうするべきなんだろう?
0327名無しさん@お腹いっぱい。
2015/02/10(火) 11:00:13.65ネットワークよりむしろ、ローカル的な問題がない事が確認できるんじゃないかな?
0328名無しさん@お腹いっぱい。
2015/02/10(火) 11:05:04.42どういうこと?
0329名無しさん@お腹いっぱい。
2015/02/10(火) 11:07:57.10なるほど。
自分ではそういう環境でスクリプトを走らせたこと無いけど、必要性は理解できる気がする。
0330名無しさん@お腹いっぱい。
2015/02/10(火) 11:11:26.560331名無しさん@お腹いっぱい。
2015/02/10(火) 11:11:41.05ネットワークの問題:待つ
ローカルの問題:別の方法を試す
0332名無しさん@お腹いっぱい。
2015/02/10(火) 11:21:02.15すみません、日本語でお願いします
0333名無しさん@お腹いっぱい。
2015/02/10(火) 11:23:49.290334名無しさん@お腹いっぱい。
2015/02/10(火) 11:41:25.850335名無しさん@お腹いっぱい。
2015/02/10(火) 11:43:10.440336名無しさん@お腹いっぱい。
2015/02/10(火) 12:28:31.34URL次第
0337名無しさん@お腹いっぱい。
2015/02/10(火) 12:55:57.86ベテランなら、サーバ自体死んでるか、sshdが動いてない(かfirewall等)
の切り分けを考慮してるんだろう。実際に使うスクリプトとしては正しい
0338名無しさん@お腹いっぱい。
2015/02/10(火) 13:20:41.45差分は専ブラで取得です^^;
0339名無しさん@お腹いっぱい。
2015/02/10(火) 13:36:06.53差分なんて git 以外にも diff や vimdiff 等あるからやってみたら?
0340名無しさん@お腹いっぱい。
2015/02/10(火) 14:15:44.400341名無しさん@お腹いっぱい。
2015/02/10(火) 19:43:43.25alias も出たから、ついでに...
自分は ${HOME}/bin に、スクリプトとして書いているが、場所はどこでもいいから
どこかにまとめて保存しておけばいいのでは?例えば、~/bin/oneliner/ 等
それらのファイルは、grep で検索も出来るし、それで見つかった script を編集するなら
history -r script で履歴に読み込んで、コマンドライン上で編集が出来る
(あと、あんまり使わないけど) bash zsh で、Ctrl-x Ctrl-e で editor を呼び出して
読み込んで実行とか
0342名無しさん@お腹いっぱい。
2015/02/10(火) 22:45:11.06> (あと、あんまり使わないけど) bash zsh で、Ctrl-x Ctrl-e で editor を呼び出して
> 読み込んで実行とか
Ctrl+rでヒストリ検索でいいんじゃない?
0343名無しさん@お腹いっぱい。
2015/02/10(火) 23:29:41.64>>342
スクリプトファイルから履歴に読み込むと、行毎に履歴の最後に追加されるから
previous-history Ctrl-p (もしくは↑)で十分だけどね
0344名無しさん@お腹いっぱい。
2015/02/14(土) 04:53:42.98!n:gs/string1/string2/
!-n
等 bash で履歴を利用するものは shopt -s histverify すれば確認・編集が出来て便利だよね
0345名無しさん@お腹いっぱい。
2015/02/16(月) 18:20:07.18どうなっちゃうの、2ちゃん?
なんか、ツイッターとかFBみたくなるのか?
極端に利用者減ると思うけどな。
1 :ニライカナイφ ★ 転載ダメ©2ch.net:2015/02/16(月) 16:24:24.83 ID:???*
◆2ちゃんねるがdatを近日廃止、さらにウェブスクレイピングを用いた専用ブラウザ開発・
公開は禁止して2015年3月3日以降はAPI経由の許諾制に
「2015/3/3以降、2ch.net専用ブラウザ(以下「専用ブラウザ」)を開発、
公開するには、2ch.netの所有者であるRaceQueen社の許諾を得て、
2ch.netが提供するAPI(以下「API」)を用いて開発する必要があります」
http://daily.2ch.net/test/read.cgi/newsplus/1424071464/
0346名無しさん@お腹いっぱい。
2015/02/16(月) 18:27:38.42テキスト広告除去
w3m some_2ch_URL |sed '1,/^$/d'|sed -e '/^━━━*$/,$d'|sed '$d'
例えば
w3m http://peace.2ch.net/test/read.cgi/unix/1415634843/ |sed '1,/^$/d'|sed -e '/^━━━*$/,$d'|sed '$d'
0347名無しさん@お腹いっぱい。
2015/02/16(月) 18:50:00.380348名無しさん@お腹いっぱい。
2015/02/16(月) 19:15:37.650349名無しさん@お腹いっぱい。
2015/02/21(土) 14:32:41.68http://hayabusa6.2ch.net/test/read.cgi/network/1387872458/
0350名無しさん@お腹いっぱい。
2015/02/24(火) 13:40:24.51あるテキストの中に含まれる、特定のキャラクタの数を数え
たいのですが、すごく簡単にできそうで、わからなくて
悩んでおります。grepでもwcでもできそうで、できません。
ご教授お願いします。
0351名無しさん@お腹いっぱい。
2015/02/24(火) 14:17:32.87全キャラクタの後ろに改行を入れて、grep 'キャラクタ' | wc -lで数えられる
改行を入れるのはOSによって面倒だったりするが。。。
0352名無しさん@お腹いっぱい。
2015/02/24(火) 14:32:17.30キャラクタ A を数える場合、
tr -dc A | wc -c
>>351
すみませんが詳しい方のみ回答をお願いします
0353名無しさん@お腹いっぱい。
2015/02/24(火) 14:40:49.91全キャラの後ろ(要するに1文字ごと)に改行は必要なくて
数えたいワード単位に改行入れて(sed)、grep、wcだね
sedあまり好きじゃないからperlならこう
perl -pe ’s/foo/foo¥n/g’ file | grep foo | wc -l
スクリプトにしてfooを引数にすりゃ汎用的に使える
0354名無しさん@お腹いっぱい。
2015/02/24(火) 17:15:08.030355名無しさん@お腹いっぱい。
2015/02/24(火) 17:53:14.61grep -o foo | wc -l
351とか353とか無駄すぎ。
353は1行に1回しかマッチしないことが保証できるので grep | wc ではなく、grep -c でよい。
0356名無しさん@お腹いっぱい。
2015/02/24(火) 19:23:17.83意気込んで帰宅してスレ開いたら>>355に書かれていたでござる
0357名無しさん@お腹いっぱい。
2015/02/24(火) 19:55:49.20"A" が抜けてるんじゃ?
$ grep -o A foo | wc -l
0358名無しさん@お腹いっぱい。
2015/02/24(火) 20:01:41.720359名無しさん@お腹いっぱい。
2015/02/24(火) 20:07:04.100360名無しさん@お腹いっぱい。
2015/02/24(火) 21:34:48.78ネタ的な解答です
echo $(( $( sed -e 's/[^で]//g; s/で/ + 1/g' data ) ))
0361名無しさん@お腹いっぱい。
2015/02/24(火) 22:11:45.11>>353ではfooが検索キーワードになっていることを受けてなんじゃね
ファイル名なりパイプ入力は実際に実行するには必要だが
言いたいことに焦点を当てるためと解釈すればおk
0362名無しさん@お腹いっぱい。
2015/02/24(火) 22:42:20.20身に染みてきた。VBSを仕事でやってるが、何せ長い。シェルスクリプトだと数十行で済むようなことが
何千行とかになってしまう。
Unixのコマンド自体がワンライナーで済んでしまうことも多いが、
シェルスクリプトや正規表現、Unixのアプリを組み合わせて20行、30行もかけば
かなりの処理ができるな。
ただし、VBSのすごいところは、GUIまでわりと自由に操作できることだな。
UnixもWindowsもそれなりに何かすばらしさを感じる。
0363名無しさん@お腹いっぱい。
2015/02/24(火) 22:43:45.95マッチ部分が重複するケースもあると思うけど
そういう時はどう書けばいいんだろ
$ echo ABC | grep -Po '..'
AB
$ echo ABC | grep -Po '.(?=.)'
A
B
$ echo ABC | ?
AB
BC
が欲しい
0364名無しさん@お腹いっぱい。
2015/02/24(火) 22:45:35.140365名無しさん@お腹いっぱい。
2015/02/24(火) 23:11:13.94>>348とかどうよ?
0366名無しさん@お腹いっぱい。
2015/02/25(水) 10:15:56.15お前は4時間以上かけてそんな回答しかできないのか
0367名無しさん@お腹いっぱい。
2015/02/25(水) 10:36:23.410368名無しさん@お腹いっぱい。
2015/02/25(水) 21:30:04.01ところで、あるテキストや特定のキャラクタは utf-8 であると考える必要性は有りや無しや。
神に問う。信頼は罪なりや。 果たして、無垢の信頼心は、罪の源泉なりや。'
echo "$str" | grep -o . | LC_COLLATE=C sort | uniq -c
echo "$str" | perl -0777 -ne 'print s/。//g,"\n"'
0369名無しさん@お腹いっぱい。
2015/02/25(水) 22:36:30.27楽しそうだね。でも、GUIの操作をすべてコマンドからやりたいよ。
オブジェクトでも作る?
0370名無しさん@お腹いっぱい。
2015/02/25(水) 22:47:56.060371名無しさん@お腹いっぱい。
2015/03/02(月) 23:05:19.70ネタは不評だったけど、最後かもしれないし >>363 にも答えておこう。
perl と ruby で
#!/bin/sh
echo '商工会議所長' |
perl -ne 'while( /(?=(会議所|所長))/g ){ print $1, "\n"; }'
echo '商工会議所長' |
ruby -Ku -ne 'puts $_.scan( /(?=(会議所|所長))/ ).join( "\n" )'
0372名無しさん@お腹いっぱい。
2015/03/02(月) 23:11:47.850373名無しさん@お腹いっぱい。
2015/03/03(火) 03:08:17.32何がなんだか…w
0374名無しさん@お腹いっぱい。
2015/03/03(火) 08:07:50.39「aaaaaaaaaa」に対して「aa」が
どうマッチするかってことなんだけど
なんで会議所と所長になっちゃうんだろうかw
脳味噌足りてなさそう
0375名無しさん@お腹いっぱい。
2015/03/03(火) 17:30:06.70AB
BC
じゃまずいのかな。
0376371
2015/03/04(水) 06:55:50.72>>374 に対しての発言の様にも取れるけど、>>371 に対しての発言ならば...
それも試した上で、書いてる
無反応だったけど >>368 で utf-8 である事を考えていないものが有る事を指摘したので
引き続き、>>363 のお題
> 単語単位だとマッチ部分が重複するケース
に沿って、日本語に入れ替えただけ
0377名無しさん@お腹いっぱい。
2015/03/04(水) 13:23:38.19所長と会議所限定じゃなく
■ このスレッドは過去ログ倉庫に格納されています