シェルスクリプト総合その24©5ch.net

2014/11/11(火) 00:54:03.43

シェルスクリプトの総合スレです。
□お約束
・特記なき場合はBourne Shell(/bin/sh)がデフォルトです。
　bash/zsh/ksh/ashなどに依存する場合は明示しましょう。
　Linuxユーザは/bin/shの正体がbashまたはdashなので特に注意。
　FreeBSDユーザは/bin/shの正体がashなので注意。
　v7 shに一番近くて、現役のshは、OpenSolaris由来のheirloom sh。
　 http://src.opensolaris.org/source/xref/onnv/onnv-gate/usr/src/cmd/sh/
　 http://heirloom.sourceforge.net/sh.html
・csh/tcshのシェルスクリプトは推奨されません。
　(理由は「csh-whynot」でググれ)
・UNIXにはシェルスクリプトに便利な小さなコマンドがいろいろあります。
　manや参考リンクを見ましょう。
　aproposないしはman -kでそれらしい単語による簡単な検索もできます。
・シェルで使えるワイルドカード等は正規表現ではありません。
　正規表現の話題はスレ違い(正規表現スレへ)
・シェルスクリプトのことをシェルってゆーな
□初心者へのアドバイス:
・適した道具を判断するのも頭の重要な使い方。シェルスクリプトよりも
　awkまたはperlの方が適した処理にはそちらを使いましょう。
・知らないコマンドが出てきたらmanを引きましょう。
・思い通りに動かないときは、まずは sh -x でトレースしましょう。
□回答者への注意事項:
・シェルスクリプトでの処理方法を質問しているのに、よくわからずに
　「そういうのはperl使いましょう」と回答するのはやめましょう。
　安易にperlに逃げずにシェルスクリプトで処理するのが頭のいいやり方。
前スレ
シェルスクリプト総合その23
http://peace.2ch.net/test/read.cgi/unix/1404204950/

**名無しさん＠お腹いっぱい。** · 2015/06/26(金) 13:06:31.47

>>775
なにを指摘されたのかも理解していないようだ

**名無しさん＠お腹いっぱい。** · 2015/06/26(金) 13:08:31.26

>>777
>新しく書くスクリプトでは xargs の別の機能を使う場合を除いて find -exec + の方が良いだろう

よくない、という指摘をしてるんだが...

**名無しさん＠お腹いっぱい。** · 2015/06/26(金) 17:04:27.96

>>780
なにを指摘されたのかも理解していないようだ

**名無しさん＠お腹いっぱい。** · 2015/06/26(金) 18:36:29.66

念の為貼っておきますよ
http://pubs.opengroup.org/onlinepubs/9699919799/utilities/find.html

http://www.jp.freebsd.org/cgi/mroff.cgi?subdir=man&;lc=1&cmd=&man=find&dir=jpman-5.4.0%2Fman&sect=0#sect3
> -exec utility [argument ...] {} +
> 　-exec と同じですが、各 utility の起動において ``{}'' はなるべく多
> 　くのパス名と置き換えられます。この動作は xargs(1) のものに似てい
> 　ます。

http://linuxjm.osdn.jp/html/GNU_findutils/man1/find.1.html
> -exec command {} +
> 　アクション -exec のこの変形も、選択したファイルに対して指定したコマンドを実行するが、
> コマンドラインを形成するとき、選択した各ファイル名をコマンドラインの末尾に
> 追加して行くという方法を取る(訳注: 略)。
> そのため、コマンドを呼び出す回数は、マッチしたファイルの数よりずっと少なくてすむわけだ。
> コマンドラインの形成法は、xargs のコマンドライン形成法とほぼ同じである。

**名無しさん＠お腹いっぱい。** · 2015/06/26(金) 18:48:07.56

理解できましたかあ? おじいちゃん。

**名無しさん＠お腹いっぱい。** · 2015/06/26(金) 22:37:52.51

>sh -c 'echo "${1:+"$0" "$@"}"' 1 2 3 4
こんなの書かなきゃいけなくなる場合ならxargsでいい気がする

**名無しさん＠お腹いっぱい。** · 2015/06/26(金) 23:30:59.69

>>782
バカはすぐオウム返しするよな。

**名無しさん＠お腹いっぱい。** · 2015/06/26(金) 23:32:45.65

>>783
それを貼って、何の意味があるの？

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 00:07:20.23

>>787
-exec + を分かっていなさそうな発言 >>765 に加え >>772 でも見られ、
話がかみ合っていない原因かもしれないと考え、念の為貼っておいた

ちなみに >>784 は別人

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 00:25:43.31

>>788
お前、プロセスの数も数えられないの？
日本語も読めないようだし、本当、生きてて大丈夫か？

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 07:41:59.25

悪いけど相手はしない

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 08:10:57.63

>>789
おじいちゃんの頃はステップ関数は比例って習ったの?
今はちがうんだよ。

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 13:57:24.86

なんだ、さんざん煽っておいて、自分が逃げてやんの。

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 18:01:58.60

ん? おじいちゃんの基準では
限定的な条件でxargsの方がファイル数/MAX_ARGSだけプロセス数が少ないから勝ちなの?
はいはい、えらいえらい。

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 19:42:45.43

一番最初に煽ったバカの基準がそれだろ。
+は使い物にならんとか親切に教えてあげたら、
shとか持ち出す本末転倒ぶりを晒してるだけじゃん。
いい加減逆ギレはみっともないよ。

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 20:48:29.92

パイプが不要なのには目をつぶるんだ。
おじいちゃんの世代って、わかりやすくて楽だね。

**名無しさん＠お腹いっぱい。** · 2015/06/27(土) 22:37:52.63

プロセスの数が増えたら余計非効率だと何回言えば分かるんだ？

**名無しさん＠お腹いっぱい。** · 2015/06/28(日) 07:24:37.85

find /dir -オプション ... -exec mv -t ディレクトリ {} +

↑で解決。不要プロセスなし。

**名無しさん＠お腹いっぱい。** · 2015/06/28(日) 16:41:15.99

解決とか言ってる割りに、比較した結果が貼られてないから机上の空論だね。

**名無しさん＠お腹いっぱい。** · 2015/06/28(日) 17:03:28.70

アスペは放置で。

**名無しさん＠お腹いっぱい。** · 2015/06/28(日) 22:54:42.25

CPUの頭打ちだからマルチコアっていう時代にパイプに神経質とか何

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 11:33:48.48

テキスト中の文字列abc123をabcAA123にしようとsedで
sed -e 's/[a-z][0-9]/.00./g' やsed -e 's/[a-z][0-9]/[a-z]AA[0-9]/g' を
試しましたがうまくいきませんでした。
どのようにすればよいのでしょうか？sed以外でできるのでしょうか？

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 12:03:55.86

sed -e 's/$[a-z][a-z]*$$[0-9][0-9]*$/\1AA\2/g'

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 12:06:03.81

+でよかったか・・・

sed -e 's/$[a-z]+$$[0-9]+$/\1AA\2/g'

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 12:21:46.28

echo abc123|sed -e 's/$[a-z]+$$[0-9]+$/\1AA\2/g'
をやってみましたがだめでした。なんでだろう。
manをみると2005年のものでした。

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 13:47:40.61

+を外したらでました
バージョンのせいかな
勉強になりました
ありがとうございました

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 13:57:57.10

どのsedを使ってるのかわからんし
どのmanを読んでるのかわからん

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 14:26:49.95

憶測で書いてみるけど、「古来の sed の正規表現では + が使えないが
GNU sed では + が使える」というオチの予感がします。

# 今ちょっと調べてみるまで GNU sed で + が使えるとは知らなかった……

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 14:40:06.66

坊や、もうちょっと勉強してからおいで、としか

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 19:01:07.47

debian系でスクリプト作ってVMで軽いDSLで動かそうとしたら
使ってるコマンドのオプションが違ってて使えなかったなあ

まあ最新のパッケージ落とせばよかったんだろうけど皆はどうしてる？

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 20:34:14.84

>>805
+ じゃなくて \+ ではどうよ？
echo abc123 | sed -e 's/$[a-z]\+$$[0-9]\+$/\1AA\2/g'

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 21:17:14.01

興味でお聞きしたいのですが
シェルスクリプトで株の発注のようなことはできませんかね？
証券会社にログインしフォーム入力して発注ボタン押すような・・
そんな言語じゃないと思うのですができたら人気出るかなあと

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 21:20:48.70

人気じゃなくて覚える気でした

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 21:26:58.24

シェルスクリプトで出来ないことなんて何もない

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 21:38:54.99

シェルスクリプトを覚えたら彼女が出来ました

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 21:41:19.11

フフフ
昔、シェルスクリプトでロト６の番号を出していたのはいい思い出
一度も当たらなかったけどな・・・

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 21:53:20.99

>>811
できるし、発想はわかるが
アルゴリズム取引の時代にシェルスクリプトではだぶん勝負にならない

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 22:08:23.46

>>811
>>348とか>>370は知ってる？

**名無しさん＠お腹いっぱい。** · 2015/06/29(月) 23:36:01.62

>>815
ロト6、わたしも時々やっています。シェルスクリプトで番号を出すのは考えもしませんでしたｗ
>>813
>>816
>>817
ご親切にありがとうございました
grepとかのパイプ並列化されてると聞いたので、もしかしてなにかしら分からない理由で発注も早いのかなと
思って聞いてみました。
>>348や>>370は知りませんでした。勝手にシェルスクリプトっていうとブラウザレスのワンライナーをイメージしていました。
教えていただいた348や370を触ってみようと思います

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 00:21:38.40

ぶっちゃけwget使えばできる

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 00:51:21.32

むしろシェルスクリプトでパケットキャプチャして通信を解析しよう。

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 06:02:29.85

>>819
JavaScriptとか使われてたらwgetでは無理

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 07:54:44.40

>>810
GNU sedでも+は使えないと思っていたけど\+なんて拡張があるんだね。
知らなかった。今後は便利に使わせてもらおう…

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 10:54:23.76

ブラウザのクッキーが必要で、JavaScriptで得られるリンクの抽出をしたいのですが
ソースを保存してgrepで試したのですがうまくいきませんでした。
なにかいい方法ありますか。

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 11:12:25.50

もうちょい条件を具体的に

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 12:12:09.26

>>821、>>823
wgetでも切った貼ったすればURLは作れる
まあそれでカバーできないのもあるだろうから100％じゃないけど
自分はフレームが分かれてるページで挫折したというか対応をやめた

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 12:24:48.15

ブラウザで操作するようなものは
firefoxのアドオンで使えるseleniumが便利なんじゃないかな

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 13:49:39.60

トイレで大きな音って屁だろ

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 13:50:38.46

誤爆しましたごめん

**名無しさん＠お腹いっぱい。** · 2015/06/30(火) 19:21:47.66

>>825, >>826
しらべてみる
ありがとう

**名無しさん＠お腹いっぱい。** · 2015/07/01(水) 00:58:33.93

>>796
おじいちゃん。-exec .... +を知らなかった事を必死にごまかそうとしてもダメだよ。

765 名無しさん＠お腹いっぱい。[sage] 2015/06/24(水) 15:44:35.63

-execだと見つかったファイルの数だけプロセスつくるんだよね？
xargsだとexecシステムコールの引数個数制限までは1個のプロセス作ってその引数に見つかったファイル全部渡すのかな？

**名無しさん＠お腹いっぱい。** · 2015/07/01(水) 01:13:29.53

つまんね。

**名無しさん＠お腹いっぱい。** · 2015/07/01(水) 07:46:12.63

GNU sedで -rオプション、*BSD sedで -Eオプションつけるとバックスラッシュ
つけなくても+が使えるみたいだ。

**名無しさん＠お腹いっぱい。** · 2015/07/01(水) 13:58:10.28

そりゃ、そっちは拡張正規表現だからな……

**名無しさん＠お腹いっぱい。** · 2015/07/01(水) 14:36:35.81

最近、ポイントがずれた応答するヤツ一人いるなぁ

**名無しさん＠お腹いっぱい。** · 2015/07/01(水) 15:04:35.61

わざとだろう
あんまり相手しちゃいけない

**名無しさん＠お腹いっぱい。** · 2015/07/02(木) 08:18:40.41

言葉が足りなかった。拡張機能なのに素の状態でバックスラッシュつければ
動いてしまうのはどうなのかな?と思ったんだ。

**名無しさん＠お腹いっぱい。** · 2015/07/02(木) 18:33:26.44

>>826

JSなページもいけるらしいが、実際やってみたら、サイトを開く、
ボタン押すなどは記録してくれるが、スクロールするとか、細かい
事は記録されなかった。画像をキャプチャしたいんだが無理の模様。
シェルスクリプトで書こうとして、LinksをJava対応とかにしてみた
ものの、努力実らず。。。

**名無しさん＠お腹いっぱい。** · 2015/07/02(木) 18:41:44.19

>>823

もしかして、ローカルマシンでの話か？

**名無しさん＠お腹いっぱい。** · 2015/07/02(木) 19:10:07.26

bashでの正規表現、コマンドごとの正規表現。
最初はバカばかしく思えた、たとえばpythonでの

import re

のほうが、思想としては正しいような気がしてきた。

**名無しさん＠お腹いっぱい。** · 2015/07/02(木) 23:42:14.95

bashで
aaa=$(( bbb + ccc ))
という表記の仕方と
aaa=$(( $bbb + $ccc ))
という表記の仕方、どちらも同じ計算結果が得られるんですが
どちらが正しいんでしょうか？どちらで書いても良い仕様なんでしょうか？

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 00:54:37.65

>>840
yes

function add() # 引数の$1と$2を足す
{
ANSWER=$(( $1 + $2 ))
}

こういうのは $は取れないけどね

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 05:34:00.18

どうせなら、

((aaa = bbb + ccc))

って書いた方がいい。この方が数値計算らしいね。

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 09:48:26.01

俺は let aaa=bbb+ccc が好きだな

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 14:16:50.30

sortせずにuniqしたいんですが、エレガントな方法ありますか？
2回目以降に出てきた重複行をカットして出力です。それ以外はsortしないで元の順のまま出力。

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 14:44:25.08

>>844
http://www.linuxquestions.org/questions/linux-newbie-8/uniq-values-in-unsorted-file-4175471813/#post5001429

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 14:55:42.55

>>845
その方法しかありませんか？
頭に数値付ける方法は知ってましたがエレガントじゃないです

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 15:20:13.81

ちょっといじれば数字なしにできるよ

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 18:44:31.13

{
　if (count[$0] == 0) {
　　print
　　count[$0]++
　}
}

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 19:39:34.12

シェルでは連想配列は使えまへん

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 19:41:35.86

awkだろｗ

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 20:13:46.43

Perlの連想配列便利
何も考えずにVBで同じようにやったらクソ遅かった

**名無しさん＠お腹いっぱい。** · 2015/07/03(金) 21:11:40.93

bash なら連想配列使えるけど遅いので素直に awk でやるのが一番

**名無しさん＠お腹いっぱい。** · 2015/07/04(土) 20:45:32.11

curl -L -O -J http://www.foo.com/bar
をやると、リダイレクト先のファイル名で保存されずにbarで保存されてしまう
リダイレクト先のファイル名で保存するにはどうすればできますか？

**名無しさん＠お腹いっぱい。** · 2015/07/04(土) 21:03:45.47

日本語お上手ですね

**名無しさん＠お腹いっぱい。** · 2015/07/04(土) 22:57:10.62

わからないなら黙ってればいいのに

-Iで情報取得してgrep、sed、展開で抽出

**名無しさん＠お腹いっぱい。** · 2015/07/04(土) 23:36:06.98

すまん、これだと改行が入ってしまう
解決法はわからない

**名無しさん＠お腹いっぱい。** · 2015/07/04(土) 23:37:41.83

>>853
curl -L -J http://www.foo.com/bar > foo

じゃだめなん？

**名無しさん＠お腹いっぱい。** · 2015/07/05(日) 00:24:31.19

展開で%%と*を使えばいい
sedはめんどくさい

**名無しさん＠お腹いっぱい。** · 2015/07/05(日) 06:16:53.25

foo.comの人って日本人なんですか？

**名無しさん＠お腹いっぱい。** · 2015/07/05(日) 08:51:57.76

whoisでも見りゃいいだろ

**名無しさん＠お腹いっぱい。** · 2015/07/05(日) 09:11:05.08

>>857
リダイレクト先のファイル名を取得したいのに決め打ちしてどうするｗ

**名無しさん＠お腹いっぱい。** · 2015/07/05(日) 11:13:12.10

>>844
nl | sort -k 2 | uniq -f 1 | sort | cut -f 2-

>>853
http://stackoverflow.com/questions/6881034/curl-to-grab-remote-filename-after-following-location

何か違和感が有るが、まあいいか

**名無しさん＠お腹いっぱい。** · 2015/07/07(火) 01:55:38.74

集団ストーカーももう時間切れかもしれないよ
予定よりも相当早いペースで突き進んでるよ
ギリシャのこと笑ってられないかもしれない
潰れる会社も出るだろうし、失業者も出るかもしれない
アウシュビッツレベルのネタだからオリンピックどころじゃないかもしれない
私の勝手な想像だけどね
でもバレテルよと何年も前から言ってるのに今日もバカの一つ覚えの電気通信で嫌がらせ
だからみんながそれが答えなのね、世界中に暴露して聞いてみろってことなのね
ということで動きが止まらない方向になっている
揉み消すとか臭いものにふたをする犯罪者の心理行動しか取れないクズは終わりかもしれない
観光客がちょっと増えたと喜んでいる場合じゃないよ、知っている人間は日本なんかに来てないよ
事実は言った人間が悪いんじゃないよ、作った人間が悪いんだよ
知ってる人間は後悔しないためにも正しい行動をしたほうがいいよ
ダメなものは世界中誰が見てもダメなんだからね

**名無しさん＠お腹いっぱい。** · 2015/07/07(火) 17:07:44.73

>>853

barって、ディレクトリ？ファイル？

**名無しさん＠お腹いっぱい。** · 2015/07/11(土) 02:16:43.69

メタ文字を含むパターンを変数に入れておいて
${var#pattern}
みたいな使い方はできないのですか?

**名無しさん＠お腹いっぱい。** · 2015/07/11(土) 05:21:37.10

>>865
できるけど。

${var#$pattern}

patternに$が必要

**名無しさん＠お腹いっぱい。** · 2015/07/12(日) 06:30:34.52

>>866
すみません、$ が抜けていました
どうやら zsh のデフォルトの仕様のせいで、
GLOB_SUBST オプションを有効にするか、${var#$~pattern} で望みどおりになりました

**名無しさん＠お腹いっぱい。** · 2015/07/12(日) 23:45:48.39

for f inの中でsedでの置換に$fを使うには度すればいいのですか？

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 03:08:28.34

sed -e "s/$f/fumofumo/"

とか

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 04:53:41.61

全部ダブルクォートにせずに、必要なところだけダブルクォートにするのがお勧め。

sed '/aaa/,$s/'"$f"'/bbbb/g'

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 13:45:08.39

count=1
for f in
do
file_name="${f##*/}"
sed -e 's/foo/foo_$f/g' /hoge/hoge.txt> ${count}_hoge.txt
mv $f ${par_dir2}/${file_name}
count=$(($count + 1))
done
これはダメ

sed -e 's/foo/foo_"$f"/g'
もだめでした

なんでだろう？

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 13:50:39.03

>>871
クォートの対応、良く見ろよ

sed -e 's/foo/foo_"$f"/g' ←じゃなくて
sed -e 's/foo/foo_'"$f"'/g'

な。' 'を一回閉じてから" "を開き直す。スペースを空けずに。

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 16:07:08.78

（全部ダブルクオートでいいのに・・・）

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 17:05:32.16

クォートなんていらないのに・・・と思いかけたが$fの中身がわからないから必要なのか
というか$fだけをダブルクォートでも問題ないのかな？

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 20:53:18.32

ファイル名を構成する文字とsedの正規表現の区切り問題は厄介だよ。

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 23:15:54.08

>>870
全部ダブルでええやん

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 23:41:43.94

>>870は
/aaa/,$ 文字列aaaとマッチする行から行末まで次のコマンドを適用
s/"$f"/bbbb/g シェル変数$fとマッチした文字列をbbbbに置き換えるコマンド
全体をダブルクォートしたら$sがシェル変数として解釈されちゃうからいやん

**名無しさん＠お腹いっぱい。** · 2015/07/13(月) 23:50:57.72

行末までじゃねえや最終行までね

**名無しさん＠お腹いっぱい。** · 2015/07/14(火) 03:14:11.34

>>872
sed -e 's/foo/foo_'"$f"'/g'
でいけました。
クォートの挙動の勉強になりました。
ありとうございます。

シェルスクリプト総合 その24©5ch.net

シェルスクリプト総合その24©5ch.net