シェルスクリプト総合 その24©5ch.net
■ このスレッドは過去ログ倉庫に格納されています
0001名無しさん@お腹いっぱい。 転載ダメ©2ch.net
2014/11/11(火) 00:54:03.43□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
FreeBSDユーザは/bin/shの正体がashなので注意。
v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/sh/
http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
manや参考リンクを見ましょう。
aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆーな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
「そういうのはperl使いましょう」と回答するのはやめましょう。
安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
前スレ
シェルスクリプト総合 その23
http://peace.2ch.net/test/read.cgi/unix/1404204950/
0298名無しさん@お腹いっぱい。
2015/02/04(水) 22:55:20.92おお、infoの日本語訳できたんだ
man on WWWのように検索できるとさらにいいね
0299名無しさん@お腹いっぱい。
2015/02/08(日) 15:04:24.54何か簡単に管理する方法がありませんかね?
0300名無しさん@お腹いっぱい。
2015/02/08(日) 15:06:57.37vimのUnite historyの様なgrep効くから、それで呼ぶか
編集して完成させる
0301名無しさん@お腹いっぱい。
2015/02/08(日) 16:40:17.45anything.elみたいなヒストリーサーチみたいですね。
bashなのでどうしたものか。
0302名無しさん@お腹いっぱい。
2015/02/09(月) 09:34:08.43aliasじゃないの?
0303名無しさん@お腹いっぱい。
2015/02/09(月) 10:04:38.990304名無しさん@お腹いっぱい。
2015/02/09(月) 18:00:27.27ぼくの書いたスクリプトが動かないなんてけしからん(´・ω・`)
シェルの方を治したまえ
0305名無しさん@お腹いっぱい。
2015/02/09(月) 18:21:02.80declare -A URL
URL=(
["Vim_part24"]="http://peace.2ch.net/test/read.cgi/unix/1413122189/"
["vim_part5"]="http://anago.2ch.net/test/read.cgi/software/1379912425/"
)
# ping for download
ping_error=0
for i in ${!URL[@]}
do
# ping ${URL[$i]} > /dev/null
ping -n 1 `echo ${URL[$i]} | awk -F"/" '/http/{print $3}'` > /dev/null
if [ "$?" -ne 0 ]; then
echo "${i} : can not contact ${URL[$i]}"
ping_error=1
fi
done
0306名無しさん@お腹いっぱい。
2015/02/09(月) 18:41:13.94pingのコマンドオプションって統一されてないよなぁ
0307名無しさん@お腹いっぱい。
2015/02/09(月) 19:27:08.45#!/bin/sh
url_list='
Vim_part24 http://peace.2ch.net/test/read.cgi/unix/1413122189/
vim_part5 http://anago.2ch.net/test/read.cgi/software/1379912425/
'
ping="ping -w 3 -c 1"
echo "$url_list" | while read thr url __; do
case "$url" in
https?://*)
host=`echo $url | cut -d/ -f3`
if ! $ping $host >/dev/null; then
echo "$thr: cannot contact $url"
err=1
fi
;;
esac
done
exit $err
0308名無しさん@お腹いっぱい。
2015/02/09(月) 19:28:49.19http://*|https://*|ftp://*)
だな。
0309名無しさん@お腹いっぱい。
2015/02/09(月) 19:33:01.270310名無しさん@お腹いっぱい。
2015/02/09(月) 19:34:49.220311名無しさん@お腹いっぱい。
2015/02/09(月) 19:39:42.45これって、どこかに由来する文化なのかな?
(cronを「くーろん」と呼ぶみたいな?いや、これは違うかな……)
0312名無しさん@お腹いっぱい。
2015/02/09(月) 19:43:34.71サンキュー
windowsのsystem32/ping.exeが呼ばれてた
そりゃ移植性がないわけだ
>>307-308
コードありがとう
>>310
-Tオプションなんてあったのか
>>309
pingで鯖落ちてないか検査した後w3mで複数のURLから取ってきて
スレの上下の不要な広告など取り除いてから git commit して
その差分見るから
全部安全に通信できるか見てからやらないと、差分の時にちょっと問題になる
通信できなかったスレがマイナス差分で大量表示されたり、
次回は大量追加されたり
git reset hard HEAD~ するぐらいならあらかじめ通信検査してからやろうと思った
0313名無しさん@お腹いっぱい。
2015/02/09(月) 19:45:19.02それもあるし、どれかひとつでもエラーでping_error=1だからサーバの状態を確認してる感じがしない
0314名無しさん@お腹いっぱい。
2015/02/09(月) 19:47:43.57echo ... | {
while read ... do
...
done
exit $err
}
0315名無しさん@お腹いっぱい。
2015/02/09(月) 20:32:51.35> -Tオプションなんてあったのか
通信系のコマンドで、タイムアウトが指定できないものはスクリプトからは利用しないとか、
そういうことは考えないで作っちゃうタイプの方ですか?
ちなみに、大抵の通信系コマンドはタイムアウトが指定できるような気がする。
0316名無しさん@お腹いっぱい。
2015/02/09(月) 20:46:31.700317名無しさん@お腹いっぱい。
2015/02/09(月) 21:22:03.82> >>299
> aliasじゃないの?
長いワンライナーは場面ごとに手直しする必要のあることが多いから、
それだと融通がきかないことがありませんか?
0318名無しさん@お腹いっぱい。
2015/02/09(月) 22:07:20.56いろいろやり方はあるだろうけど、自分の場合は
libwww-perl(debian系)に入ってるHEADコマンドで.datファイルのLast-Modifiedフィールドみたいなのを見てる
0319名無しさん@お腹いっぱい。
2015/02/10(火) 06:45:24.43ここに書いてる奴本人じゃね?w
0320名無しさん@お腹いっぱい。
2015/02/10(火) 06:59:04.70XP じゃね?
毎回設定してたような気がする
2K は忘れた
0321名無しさん@お腹いっぱい。
2015/02/10(火) 07:03:40.32ダイヤルアップとかで最初の接続に時間がかかるから ping でネットワーク接続してから、おもむろに目的のアプリケーションで接続するって言うのがあったような気がする
0322名無しさん@お腹いっぱい。
2015/02/10(火) 10:03:19.02ping打っているかどうか確認してるんじゃ?
>>321
ちょっと違うけど自動切断有効にしてて切れてほしくないときに
ping打ちっぱなしにしてたな
0323名無しさん@お腹いっぱい。
2015/02/10(火) 10:06:07.01差分は取得しないのか
0324名無しさん@お腹いっぱい。
2015/02/10(火) 10:12:53.450325名無しさん@お腹いっぱい。
2015/02/10(火) 10:32:51.28切り分けといっても、pingが成功したらネットワーク的に問題ないとは言えないわけで……
対話環境で作業している時だったら、お手軽だから「まずping打ってみるか」というのは
分かる気がするけど、スクリプトの場合では中途半端なように思えます。
「ICMPは通るね」というのをスクリプト中から確認できても、それほど嬉しくはないよね?
0326名無しさん@お腹いっぱい。
2015/02/10(火) 10:41:38.26正しい汚染チェックってどうするべきなんだろう?
0327名無しさん@お腹いっぱい。
2015/02/10(火) 11:00:13.65ネットワークよりむしろ、ローカル的な問題がない事が確認できるんじゃないかな?
0328名無しさん@お腹いっぱい。
2015/02/10(火) 11:05:04.42どういうこと?
0329名無しさん@お腹いっぱい。
2015/02/10(火) 11:07:57.10なるほど。
自分ではそういう環境でスクリプトを走らせたこと無いけど、必要性は理解できる気がする。
0330名無しさん@お腹いっぱい。
2015/02/10(火) 11:11:26.560331名無しさん@お腹いっぱい。
2015/02/10(火) 11:11:41.05ネットワークの問題:待つ
ローカルの問題:別の方法を試す
0332名無しさん@お腹いっぱい。
2015/02/10(火) 11:21:02.15すみません、日本語でお願いします
0333名無しさん@お腹いっぱい。
2015/02/10(火) 11:23:49.290334名無しさん@お腹いっぱい。
2015/02/10(火) 11:41:25.850335名無しさん@お腹いっぱい。
2015/02/10(火) 11:43:10.440336名無しさん@お腹いっぱい。
2015/02/10(火) 12:28:31.34URL次第
0337名無しさん@お腹いっぱい。
2015/02/10(火) 12:55:57.86ベテランなら、サーバ自体死んでるか、sshdが動いてない(かfirewall等)
の切り分けを考慮してるんだろう。実際に使うスクリプトとしては正しい
0338名無しさん@お腹いっぱい。
2015/02/10(火) 13:20:41.45差分は専ブラで取得です^^;
0339名無しさん@お腹いっぱい。
2015/02/10(火) 13:36:06.53差分なんて git 以外にも diff や vimdiff 等あるからやってみたら?
0340名無しさん@お腹いっぱい。
2015/02/10(火) 14:15:44.400341名無しさん@お腹いっぱい。
2015/02/10(火) 19:43:43.25alias も出たから、ついでに...
自分は ${HOME}/bin に、スクリプトとして書いているが、場所はどこでもいいから
どこかにまとめて保存しておけばいいのでは?例えば、~/bin/oneliner/ 等
それらのファイルは、grep で検索も出来るし、それで見つかった script を編集するなら
history -r script で履歴に読み込んで、コマンドライン上で編集が出来る
(あと、あんまり使わないけど) bash zsh で、Ctrl-x Ctrl-e で editor を呼び出して
読み込んで実行とか
0342名無しさん@お腹いっぱい。
2015/02/10(火) 22:45:11.06> (あと、あんまり使わないけど) bash zsh で、Ctrl-x Ctrl-e で editor を呼び出して
> 読み込んで実行とか
Ctrl+rでヒストリ検索でいいんじゃない?
0343名無しさん@お腹いっぱい。
2015/02/10(火) 23:29:41.64>>342
スクリプトファイルから履歴に読み込むと、行毎に履歴の最後に追加されるから
previous-history Ctrl-p (もしくは↑)で十分だけどね
0344名無しさん@お腹いっぱい。
2015/02/14(土) 04:53:42.98!n:gs/string1/string2/
!-n
等 bash で履歴を利用するものは shopt -s histverify すれば確認・編集が出来て便利だよね
0345名無しさん@お腹いっぱい。
2015/02/16(月) 18:20:07.18どうなっちゃうの、2ちゃん?
なんか、ツイッターとかFBみたくなるのか?
極端に利用者減ると思うけどな。
1 :ニライカナイφ ★ 転載ダメ©2ch.net:2015/02/16(月) 16:24:24.83 ID:???*
◆2ちゃんねるがdatを近日廃止、さらにウェブスクレイピングを用いた専用ブラウザ開発・
公開は禁止して2015年3月3日以降はAPI経由の許諾制に
「2015/3/3以降、2ch.net専用ブラウザ(以下「専用ブラウザ」)を開発、
公開するには、2ch.netの所有者であるRaceQueen社の許諾を得て、
2ch.netが提供するAPI(以下「API」)を用いて開発する必要があります」
http://daily.2ch.net/test/read.cgi/newsplus/1424071464/
0346名無しさん@お腹いっぱい。
2015/02/16(月) 18:27:38.42テキスト広告除去
w3m some_2ch_URL |sed '1,/^$/d'|sed -e '/^━━━*$/,$d'|sed '$d'
例えば
w3m http://peace.2ch.net/test/read.cgi/unix/1415634843/ |sed '1,/^$/d'|sed -e '/^━━━*$/,$d'|sed '$d'
0347名無しさん@お腹いっぱい。
2015/02/16(月) 18:50:00.380348名無しさん@お腹いっぱい。
2015/02/16(月) 19:15:37.650349名無しさん@お腹いっぱい。
2015/02/21(土) 14:32:41.68http://hayabusa6.2ch.net/test/read.cgi/network/1387872458/
0350名無しさん@お腹いっぱい。
2015/02/24(火) 13:40:24.51あるテキストの中に含まれる、特定のキャラクタの数を数え
たいのですが、すごく簡単にできそうで、わからなくて
悩んでおります。grepでもwcでもできそうで、できません。
ご教授お願いします。
0351名無しさん@お腹いっぱい。
2015/02/24(火) 14:17:32.87全キャラクタの後ろに改行を入れて、grep 'キャラクタ' | wc -lで数えられる
改行を入れるのはOSによって面倒だったりするが。。。
0352名無しさん@お腹いっぱい。
2015/02/24(火) 14:32:17.30キャラクタ A を数える場合、
tr -dc A | wc -c
>>351
すみませんが詳しい方のみ回答をお願いします
0353名無しさん@お腹いっぱい。
2015/02/24(火) 14:40:49.91全キャラの後ろ(要するに1文字ごと)に改行は必要なくて
数えたいワード単位に改行入れて(sed)、grep、wcだね
sedあまり好きじゃないからperlならこう
perl -pe ’s/foo/foo¥n/g’ file | grep foo | wc -l
スクリプトにしてfooを引数にすりゃ汎用的に使える
0354名無しさん@お腹いっぱい。
2015/02/24(火) 17:15:08.030355名無しさん@お腹いっぱい。
2015/02/24(火) 17:53:14.61grep -o foo | wc -l
351とか353とか無駄すぎ。
353は1行に1回しかマッチしないことが保証できるので grep | wc ではなく、grep -c でよい。
0356名無しさん@お腹いっぱい。
2015/02/24(火) 19:23:17.83意気込んで帰宅してスレ開いたら>>355に書かれていたでござる
0357名無しさん@お腹いっぱい。
2015/02/24(火) 19:55:49.20"A" が抜けてるんじゃ?
$ grep -o A foo | wc -l
0358名無しさん@お腹いっぱい。
2015/02/24(火) 20:01:41.720359名無しさん@お腹いっぱい。
2015/02/24(火) 20:07:04.100360名無しさん@お腹いっぱい。
2015/02/24(火) 21:34:48.78ネタ的な解答です
echo $(( $( sed -e 's/[^で]//g; s/で/ + 1/g' data ) ))
0361名無しさん@お腹いっぱい。
2015/02/24(火) 22:11:45.11>>353ではfooが検索キーワードになっていることを受けてなんじゃね
ファイル名なりパイプ入力は実際に実行するには必要だが
言いたいことに焦点を当てるためと解釈すればおk
0362名無しさん@お腹いっぱい。
2015/02/24(火) 22:42:20.20身に染みてきた。VBSを仕事でやってるが、何せ長い。シェルスクリプトだと数十行で済むようなことが
何千行とかになってしまう。
Unixのコマンド自体がワンライナーで済んでしまうことも多いが、
シェルスクリプトや正規表現、Unixのアプリを組み合わせて20行、30行もかけば
かなりの処理ができるな。
ただし、VBSのすごいところは、GUIまでわりと自由に操作できることだな。
UnixもWindowsもそれなりに何かすばらしさを感じる。
0363名無しさん@お腹いっぱい。
2015/02/24(火) 22:43:45.95マッチ部分が重複するケースもあると思うけど
そういう時はどう書けばいいんだろ
$ echo ABC | grep -Po '..'
AB
$ echo ABC | grep -Po '.(?=.)'
A
B
$ echo ABC | ?
AB
BC
が欲しい
0364名無しさん@お腹いっぱい。
2015/02/24(火) 22:45:35.140365名無しさん@お腹いっぱい。
2015/02/24(火) 23:11:13.94>>348とかどうよ?
0366名無しさん@お腹いっぱい。
2015/02/25(水) 10:15:56.15お前は4時間以上かけてそんな回答しかできないのか
0367名無しさん@お腹いっぱい。
2015/02/25(水) 10:36:23.410368名無しさん@お腹いっぱい。
2015/02/25(水) 21:30:04.01ところで、あるテキストや特定のキャラクタは utf-8 であると考える必要性は有りや無しや。
神に問う。信頼は罪なりや。 果たして、無垢の信頼心は、罪の源泉なりや。'
echo "$str" | grep -o . | LC_COLLATE=C sort | uniq -c
echo "$str" | perl -0777 -ne 'print s/。//g,"\n"'
0369名無しさん@お腹いっぱい。
2015/02/25(水) 22:36:30.27楽しそうだね。でも、GUIの操作をすべてコマンドからやりたいよ。
オブジェクトでも作る?
0370名無しさん@お腹いっぱい。
2015/02/25(水) 22:47:56.060371名無しさん@お腹いっぱい。
2015/03/02(月) 23:05:19.70ネタは不評だったけど、最後かもしれないし >>363 にも答えておこう。
perl と ruby で
#!/bin/sh
echo '商工会議所長' |
perl -ne 'while( /(?=(会議所|所長))/g ){ print $1, "\n"; }'
echo '商工会議所長' |
ruby -Ku -ne 'puts $_.scan( /(?=(会議所|所長))/ ).join( "\n" )'
0372名無しさん@お腹いっぱい。
2015/03/02(月) 23:11:47.850373名無しさん@お腹いっぱい。
2015/03/03(火) 03:08:17.32何がなんだか…w
0374名無しさん@お腹いっぱい。
2015/03/03(火) 08:07:50.39「aaaaaaaaaa」に対して「aa」が
どうマッチするかってことなんだけど
なんで会議所と所長になっちゃうんだろうかw
脳味噌足りてなさそう
0375名無しさん@お腹いっぱい。
2015/03/03(火) 17:30:06.70AB
BC
じゃまずいのかな。
0376371
2015/03/04(水) 06:55:50.72>>374 に対しての発言の様にも取れるけど、>>371 に対しての発言ならば...
それも試した上で、書いてる
無反応だったけど >>368 で utf-8 である事を考えていないものが有る事を指摘したので
引き続き、>>363 のお題
> 単語単位だとマッチ部分が重複するケース
に沿って、日本語に入れ替えただけ
0377名無しさん@お腹いっぱい。
2015/03/04(水) 13:23:38.19所長と会議所限定じゃなく
0379名無しさん@お腹いっぱい。
2015/03/04(水) 22:57:35.29みんなどんな時も/bin/sh縛りなの(´・ω・`)?
それとも割と躊躇なく、bashとかzsh使うの(´・ω・`)?
使う人はどういう線引きで/bin/shと高機能シェルを使い分けてるの(´・ω・`)?
0380名無しさん@お腹いっぱい。
2015/03/04(水) 23:04:13.670381371
2015/03/06(金) 06:31:41.84wikipedia で LL言語を見ると、awk も AUTO だけど、sed は入っていなかったので
sed を使って無理やり書いてみよう
.*? が使えないので .. みたいな正規表現への対応は思いつけなかったけど、単語を抜き出すだけならこれで
#!/bin/sh
re1=${1:-会議所\|所長}
str=$re1
while
re2=$re2$( echo "$str" | sed -e 's/^\(.\).*/\1/' )
length=${#str}
str=${str#*|}
[ "${#str}" -ne "$length" ]
do
:
done
# ここから
sed -ne '
: loop
/'"$re1"'/ {
s/^[^'"$re2"']*\('"$re1"'\)/\1\n/
P
s/^.\(.*\)\n/\1/
b loop
}
'
0382名無しさん@お腹いっぱい。
2015/03/06(金) 06:33:59.92#!/bin/bash
re1=${1:-会議所\|所長}
str=$re1
while
re2=$re2${str:0:1}
length=${#str}
str=${str#*|}
[ "${#str}" -ne "$length" ]
do
:
done
while
IFS= read -r line
do
while
[[ "$line" =~ ^[^${re2}]*((${re1}).*) ]]
do
echo "${BASH_REMATCH[2]}"
line=${BASH_REMATCH[1]}
line=${line#?}
done
done
0383名無しさん@お腹いっぱい。
2015/03/06(金) 06:36:18.16$ echo 'abc' | ./testsed 'ab\|bc'
ab
bc
$ echo 'abc' | ./testbash 'a.|b.'
ab
bc
0384371
2015/03/06(金) 07:34:31.86全般的に変数代入の箇所のクォート
var="var"
と
#!/bin/bash
re1="${1:-会議所|所長} "
0385名無しさん@お腹いっぱい。
2015/03/06(金) 08:05:27.130386名無しさん@お腹いっぱい。
2015/03/06(金) 09:15:28.000387名無しさん@お腹いっぱい。
2015/03/08(日) 00:18:10.47個人用とか、そのマシンに特化したスクリプトならbashだろうがzshだろうが何でもアリだけど
普段から/bin/sh縛りにしておくと、違うマシンでもスクリプトが書けるようになるぞ
0388名無しさん@お腹いっぱい。
2015/03/08(日) 03:45:15.37でも実際は変な癖がそれぞれついてるんで、あまり役に立たない。
0389名無しさん@お腹いっぱい。
2015/03/08(日) 05:35:53.000390名無しさん@お腹いっぱい。
2015/03/08(日) 05:57:27.23bashが/bin/にない環境もあるで
0391名無しさん@お腹いっぱい。
2015/03/08(日) 07:00:32.870392名無しさん@お腹いっぱい。
2015/03/08(日) 08:29:58.08#!/sbin/busybox sh
と書くこと。
0393名無しさん@お腹いっぱい。
2015/03/09(月) 01:03:57.32害悪。
君個人しか絶対使わないマシン以外は触らないで。
0394前スレ119
2015/03/11(水) 18:57:08.87さて、プレーンテキスト中の
hoge_01_bar.pdf
hoge_01_foo.pdf
hoge_02_bar.pdf
hoge_02_foo.pdf
。。。
hoge_58_foo.pdf
hoge_59_bar.pdf
hoge_59_foo.pdf
hoge_60_bar.pdf
hoge_60_foo.pdf
を
hoge_{01..60}_bar.pdf
hoge_{01..60}_foo.pdf
に置換したいのですがどうすればできますか?
よろしくお願いします。
0395前スレ119
2015/03/11(水) 19:13:00.82同じtree.txt中に混在している状況です。
数字の部分も
01_{01..07} #(実際は7行ある)、
...
04_{01..04} #(これも4行ある)
になっているブロックもあったりしてかなりヤヤコシイのですが、
[(連番になっている数字)以外のところが同じ行]を検出して数字を{}でまとめたい感じです。
3000行あって手作業は泣きそうなので、エレガントな方法をご教授いただければ幸いです。
{01..04}_{01..07}とする必要は無いです。
よろしくお願いします。
0396名無しさん@お腹いっぱい。
2015/03/11(水) 19:16:18.160397名無しさん@お腹いっぱい。
2015/03/11(水) 19:54:30.56■ このスレッドは過去ログ倉庫に格納されています