トップページunix
1001コメント225KB

連番のH画像/動画を一気にダウンロードするX

■ このスレッドは過去ログ倉庫に格納されています
0001名無しさん@お腹いっぱい。2011/12/03(土) 15:58:59.38
ギボンヌ

連番のH画像/動画を一気にダウンロードする4
http://hibari.2ch.net/test/read.cgi/unix/1305422004/
前スレ 連番のH画像/動画を一気にダウンロードする3
http://hibari.2ch.net/test/read.cgi/unix/1272561192/
前々スレ 連番のH画像/動画を一気にダウンロードする2
http://pc12.2ch.net/test/read.cgi/unix/1135533382/
前々々スレ 連番のH画像を一気にダウンロードする
http://pc8.2ch.net/test/read.cgi/unix/979106537/
0454名無しさん@お腹いっぱい。2012/03/20(火) 06:34:41.99
6.3になってた
0455名無しさん@お腹いっぱい。2012/03/20(火) 06:56:10.76
>>454
トンクス
0456名無しさん@お腹いっぱい。2012/03/20(火) 08:36:46.78
よく見たらいまだに6使ってた恥ずかしい…
0457名無しさん@お腹いっぱい。2012/03/20(火) 10:18:24.21
readmeで低脳煽っててワロタ
0458名無しさん@お腹いっぱい。2012/03/20(火) 10:26:50.62
このスレの流れみて低能な書き込みが目立ったんじゃね
どうでもいい書き込みが多くなったからな
前回と比べてreadmeにもそれなりに書き加えてあるし
0459名無しさん@お腹いっぱい。2012/03/20(火) 10:29:09.38
精力旺盛な厨房がこれ使い始めてるからな
うらやましいわ
0460名無しさん@お腹いっぱい。2012/03/20(火) 17:14:15.95
ヒマ潰しに画像の検証の仕様変更してみた
今まではバイナリに任意の文字列で検証してたが(ver6.3まで)
ハッシュ比較に変更してみた(ver6.4α)←今ココ検証中orz
これにより精度は格段に上がるからレジュームファイルがほぼ出来ないはずだが
落とす速度的には微妙かな…
全体的に遅いようなら一部(破損画像)のみに変更しようかな
0461名無しさん@お腹いっぱい。2012/03/20(火) 23:49:50.53
>>460
破損する率は何ボなんだよ。
そろそろ破損しない手を考えてもいいんじゃないか?
0462名無しさん@お腹いっぱい。2012/03/20(火) 23:53:37.39
ほんとだよ、やる気あんのか
0463名無しさん@お腹いっぱい。2012/03/20(火) 23:56:07.18
>>445
人が気ぃ使ってわざわざlofiで書いたのにお前さんたら
0464名無しさん@お腹いっぱい。2012/03/21(水) 00:29:16.15
>>461
今のところ破損は一切ない=レジュームが作られてない
ていうか検証が飽きたからこれ以上知らんorz
ただハッシュ生成に時間掛かるぽっいから
バイナリで簡易確認してからハッシュ確認に変更して検証してる

検証したいヤツいるならあげるが…
0465名無しさん@お腹いっぱい。2012/03/21(水) 00:32:17.53
レジュームリストを使って再度走らせたとして
そこで補完出来たかどうかの判別はどうすればいいんだ?
再度やっても破損という可能性もあるじゃない?
0466名無しさん@お腹いっぱい。2012/03/21(水) 00:41:01.69
>>465
正常に落とせない=レジューム作成にしてある
作成の有無で確認できる
鯖元が破損だった場合もレジューム作成される6.3までは
↑の場合の回避策としてハッシュ確認を導入してみた
検証ではレジューム作成されないから鯖元と同じ物が取得できてる
0467名無しさん@お腹いっぱい。2012/03/21(水) 02:07:24.94
自動でフォルダ名に邦題をつけるようにしては頂けないでしょうか?
ご存じかとは思いますが、リスト画面をクリックしてサムネイル画面に行くと、英題の下に邦題がある場合が殆どなので、
それをフォルダ名にして頂きたく・・・
宜しくお願いします
0468名無しさん@お腹いっぱい。2012/03/21(水) 02:30:16.89
そういう使い方はしないような…
0469名無しさん@お腹いっぱい。2012/03/21(水) 02:40:03.08
元々日本語出力になってるが失敗すると英語になるように設定されてる
その程度お前がやれ
0470名無しさん@お腹いっぱい。2012/03/21(水) 02:49:39.40
いやおまえやれ
0471名無しさん@お腹いっぱい。2012/03/21(水) 03:03:58.17
>>570
じゃあおまえがやれ
0472名無しさん@お腹いっぱい。2012/03/21(水) 03:04:20.38
設定項目変えるだけだし
その程度すら理解出来ないのか?
ヒント:原因はエンコードの失敗
0473名無しさん@お腹いっぱい。2012/03/21(水) 05:05:16.06
ハッシュ生成に時間がかかるってそんなに?
検証って何やってるんだろ
0474名無しさん@お腹いっぱい。2012/03/21(水) 23:22:30.94
最近落とすもん減ってきたから、
並列度落とすかなあ。
0475名無しさん@お腹いっぱい。2012/03/22(木) 00:58:51.06
>>464
前にプロキシ通すと画像が壊れてることがあるとかなんとか言ってたのはあんたじゃないの?
あれはどうなったんだい。勘違いだったの?
0476名無しさん@お腹いっぱい。2012/03/22(木) 02:01:55.44
はい
0477名無しさん@お腹いっぱい。2012/03/22(木) 02:02:56.52
結局リトライ頻発の原因は利用者が増えすぎて串が駄目になってきてるってことでいいの?
生だと落とせる量に制限あるけど、改善されていかないようなら妥協した方がいいんかな?
0478名無しさん@お腹いっぱい。2012/03/22(木) 02:06:10.61
>>475
今はver5からソースのみ串通して画像は全て生IPで落とすようにしてあるが
いつのver事を言ってるんだ?
串使う=串&鯖負荷が原因で正常取得できないor落とすのに時間かかる=画像破損につながる
って意味だったはずだが
0479名無しさん@お腹いっぱい。2012/03/22(木) 02:09:05.61
>>477
ソースを串取得にしてあるから結局は利用者増えると頻発は必然だね
前だと生IPで150前後で規制入るっぽい仕様変更あったら知らんが
0480名無しさん@お腹いっぱい。2012/03/22(木) 02:10:49.06
ツールの作者好きだよ
セックスしよ
0481名無しさん@お腹いっぱい。2012/03/22(木) 02:14:57.92
>>479
なるほど、てことはもし未だに規制が存在するなら、
>>478でver5以降は画像取得そのものは生使ってるって書いてあるから、
それ以上取りたいならそれより前ver使えってことでOK?
0482名無しさん@お腹いっぱい。2012/03/22(木) 02:17:14.41
生IP取得になってからは画像破損がかなり減っている筈
今の最新6.4からは
レジューム=鯖負荷が原因で破損する時のみ作成される仕様にしてある
0483名無しさん@お腹いっぱい。2012/03/22(木) 02:20:25.17
つーかそもそもそんなに破損するもん?
verifyなんちゃらだけじゃチェックできないってこと?
0484名無しさん@お腹いっぱい。2012/03/22(木) 02:21:03.10
>>481
完全に切り分けできてないがソースに規制はいってるが
画像自体は入っていない

>それ以上取りたいならそれより前ver使えってことでOK?
なぜそうなるのか教えて?
0485名無しさん@お腹いっぱい。2012/03/22(木) 02:23:13.88
>>483
鯖負荷が原因だからこちらではなんとも言えんな
原因が取得方法でなくなったから確認回数増やせばそのうち落とせるけど
0486名無しさん@お腹いっぱい。2012/03/22(木) 02:30:17.38
>>484
つまり規制が入ってるソースにおいてのみ串使ってるから、
その後生で画像取っても規制には引っかからないってことですね…
ちょっと勘違いをしてました。
てっきり画像自体にも規制があるものだと思っていたので、
ver5から画像取得が生に以降したということは、
それ以前のver4なら画像取得も串利用だから、規制から逃れられる
という風に解釈してました
無知識で質問してしまったので、噛み合わなくて「何言ってんだこいつ」と感じるかもしれません…すいませんでした
0487名無しさん@お腹いっぱい。2012/03/22(木) 02:48:35.71
バカな原始猿のくせに人間のツール使うなよ
0488名無しさん@お腹いっぱい。2012/03/22(木) 10:34:40.49
やってることは必死こいてオカズ集めてマスかいてるだけなんだから全員猿みたいなもんだろ
0489名無しさん@お腹いっぱい。2012/03/22(木) 10:52:22.92
ワロタ
0490名無しさん@お腹いっぱい。2012/03/22(木) 11:23:29.54
最新verだからといって一部のアドレスでCant find first pageってなる現象が無くなったわけではないのね
サムネアドから画像1枚目のアドに入れ直すのがだるい…
0491名無しさん@お腹いっぱい。2012/03/22(木) 12:25:05.01
>一部のアドレスでCant find first pageってなる現象
ってどれ?
串変わっても永遠に表示されて落とせないの?
原因のほとんどが串だから串が変われば落とせるはずだが

>サムネアドから画像1枚目のアドに入れ直す
そんな面倒なこと一度もやったことないな放置してれば落ちるからな
0492名無しさん@お腹いっぱい。2012/03/22(木) 12:44:00.58
>>491
Cant find first page from キューリストに入れたアドレス
って感じに出てその後Retry download、串変わって上の繰り返し
このスレのどっかでアドを画像の一枚目のページに変えたら解決したって書いてあったから、
それやるしかないんかなぁと
キューリストに入れたアドレスの2/3位がその現象になって参る
0493名無しさん@お腹いっぱい。2012/03/22(木) 12:54:41.17
>>492
原因串だから常時繰り返すなら再度実行したほうがいいかな
一応分散目的で複数サイトから串使うようにしてあるが
微妙なサイトもあるからオリジナルの串リスト使うとかで回避かな

ソースを串で取得は規制回避のためだから生取得は規制されるのでその辺は各自判断で
まぁエラーあっても放置が一番楽だよ
0494名無しさん@お腹いっぱい。2012/03/23(金) 13:44:06.68
みなさんexからDLできてますか?
0495名無しさん@お腹いっぱい。2012/03/23(金) 14:57:58.34
このサルは何時の話をしてんだ?
サルじゃこのスレすら読めないか…
0496名無しさん@お腹いっぱい。2012/03/23(金) 17:02:31.94
かまうなよ。
0497名無しさん@お腹いっぱい。2012/03/23(金) 17:38:17.28
彼女どころか、センズリのネタすら自分で調達出来ない
0498名無しさん@お腹いっぱい。2012/03/23(金) 17:46:30.47
その点俺らは立派だよな
自分のオナネタくらい自分で集められるんだから
0499名無しさん@お腹いっぱい。2012/03/23(金) 18:08:07.77
うむ立派だな、猿もマスかきゃ木に登るってやつか
0500名無しさん@お腹いっぱい。2012/03/23(金) 18:16:52.69
ログインせずにloliタグが付いてるindex見るにはどうすればいいんだ?
クッキでどうにかならんかな?
0501名無しさん@お腹いっぱい。2012/03/23(金) 23:33:10.76
Q)ならぬなら?
1)出来るようになるまで待つ。
2)出来るようにしてみる。
3)けっ、どうせ屑漫画だろ見たくもねぇつぶれろ変態。
0502名無しさん@お腹いっぱい。2012/03/24(土) 01:47:24.49
4)オカズなしで試みる
5)なんとか人に頼み込む
6)二次元は諦めて・・・
7)寝る
0503名無しさん@お腹いっぱい。2012/03/24(土) 05:48:15.78
indexに入れない時の日本語タイトルの取得方法なんかある?
現状だと個別ページで取得するから英語になるんだよね
0504名無しさん@お腹いっぱい。2012/03/24(土) 18:08:30.82
おわああああああああああああああああああああああああああああああああああああああああああああああああsclpmさえおふぃhヴぃおj
0505名無しさん@お腹いっぱい。2012/03/25(日) 01:11:54.23
A)中州で抜こう!
0506名無しさん@お腹いっぱい。2012/03/25(日) 02:20:52.16
おっぱい画像を落とす云々があったけど
あれ生温いよなあ
0507名無しさん@お腹いっぱい。2012/03/27(火) 01:06:03.52
起動させて放置して確認したら、
名前が付いたフォルダはあっても中身が空なのがちらほら。
しばらく試行して駄目だったら閉じる仕様なんでしょうか?
0508名無しさん@お腹いっぱい。2012/03/27(火) 18:51:59.23
過去スレ嫁
同じ質問繰り返すんじゃねーよサル
0509名無しさん@お腹いっぱい。2012/03/27(火) 19:21:47.67
>>507-508
同じ遣り取りをするサル(笑)
0510名無しさん@お腹いっぱい。2012/03/27(火) 22:57:43.37
ehgm0110 NYSL Version 0.9982 を利用中。
長時間利用していると、out of memoryになるんだけど、
どの変数がメモリ食い続けてるのか分かる人いる?

ソース見ても、えんえんとデータため続けるような変数は見当たらないんだが。
0511名無しさん@お腹いっぱい。2012/03/27(火) 23:19:43.64
そんな古いの低能なサルしか使ってねーよ
0512名無しさん@お腹いっぱい。2012/03/27(火) 23:22:56.08
IDが表示されないって便利だな
0513名無しさん@お腹いっぱい。2012/03/27(火) 23:40:34.62
えー古いのー!?
多少いじったけど普通に動くから、思いもしなかった…
0514名無しさん@お腹いっぱい。2012/03/28(水) 02:10:56.58
>>508
前々からある現象だったんですか…
新しいverに変えてから起こりだしたから、
現行スレだけしか見てませんでした。
申し訳ありません
0515名無しさん@お腹いっぱい。2012/03/28(水) 05:48:39.47
>>507,514
>名前が付いたフォルダはあっても中身が空なのがちらほら。
>新しいverに変えてから起こりだしたから、
今の最新6.4だと通常に実行して画像取得失敗してもレジュームが残る仕様になってるから
完全に空になることはない
元々2バイト環境下で実行できるようになってないから

たぶん過去スレ同様だと思うが↓
986 名前:名無しさん@お腹いっぱい。[sage] 投稿日:2011/12/02(金) 10:18:10.80
>>983
ehgm2ver3をとったそのままの状態で特になにもいじらずに使ってる
終わった後のフォルダ見たら、フォルダの中にフォルダがあってっていうのが続いて、
途中途中に画像がある(途中で串変えながら取ってるから?)、それでフォルダの一番奥に拡張子無しのが2、3個ある感じ
やり直したら全部マトモに取れたりするから、URLはあんまり関係無いかもしれんけど、
http://exhentai.org/g/436167/80b6b58814/ とか
酷いときは8個ぐらいリストに入れて全部なったりする

987 名前:名無しさん@お腹いっぱい。[sage] 投稿日:2011/12/02(金) 12:07:19.54
>>986
フォルダの中にフォルダ作成されるのは環境問題
plの実行場所に問題があると思う
全体的に見て日本語フォルダ配下にplが入ってないか?
plの実行パスに日本語(2バイト文字)が含まると
フォルダが重複されるのは確認してるpl内の問題
0516名無しさん@お腹いっぱい。2012/03/30(金) 20:18:07.39
exパンダなんだけどw
俺に叡智を授けてくれ
0517名無しさん@お腹いっぱい。2012/03/30(金) 20:31:37.44
パンダだってサルにはお似合いじゃん
0518名無しさん@お腹いっぱい。2012/03/30(金) 21:18:53.38
マッチが届けてくれたんじゃねえか
0519名無しさん@お腹いっぱい。2012/03/30(金) 23:12:38.65
ex最近koreanとかchinese多すぎでウンザリ
0520名無しさん@お腹いっぱい。2012/03/31(土) 11:28:24.38
貰ってばかりの奴が文句いう筋もなかろうに。
Keywrod に '-korean' 追加すると korean を含むものを除外するって知らん訳じゃないよな。
0521名無しさん@お腹いっぱい。2012/03/31(土) 16:08:53.10
知ってたらウンザリしないだろ
ちょっと考えればわかるのに、馬鹿かお前はw
0522名無しさん@お腹いっぱい。2012/03/31(土) 18:06:22.64
当然知ってるけど一々入力するのメンドイ
0523名無しさん@お腹いっぱい。2012/03/31(土) 22:39:45.85
自分で search plugin 書けばいいじゃん
0524名無しさん@お腹いっぱい。2012/04/02(月) 01:32:58.43
レジューム用ログってフルパスでもおっけー?
その場合はどう記述すればいいん?
0525名無しさん@お腹いっぱい。2012/04/02(月) 06:37:39.54
-Dのオプションが効きません
-dやオプション無しでディレクトリー指定した時にはちゃんと機能するのですが
-D の時はデフォルトのdownloadにファイルが保存されてしまいます
解決方法はあるでしょうか
0526名無しさん@お腹いっぱい。2012/04/02(月) 07:09:28.55
>>524
古い奴ならフルパスでも使えるはず

>>525
-Dは落とす場所の指定で
-dって格納フォルダを個別指定だよな
-D使う時どのように実行してる?
0527名無しさん@お腹いっぱい。2012/04/02(月) 07:26:25.37
>>526
perl ehgm.pl queue_list.txt -P proxy_list.txt -D D:\myDocuments\new

といった感じに。
D:\myDocuments\new以下に作品名のフォルダが作られてその中にファイルが落ちるといった挙動を想定していたんですが
デフォの保存フォルダに作品名フォルダが作られてその中に保存されるだけでした
0528名無しさん@お腹いっぱい。2012/04/02(月) 12:34:53.44
指定方法に問題があるね
pl内確認してもう一度やってみな
その程度も分からなければ諦めることだ
0529名無しさん@お腹いっぱい。2012/04/02(月) 17:48:21.85
perl ehgm.pl queue_list.txt -P proxy_list.txt -D 'D:/myDocuments/new'
のようにしても
perl ehgm.pl queue_list.txt -P proxy_list.txt -D './hoge/'
のようにしてもデフォルトの設定のままでした。

ちなみに試しにehgm.pl内の該当項目を
my $defaultBaseDir = 'D:/myDocuments/new';
のようにしてやるとちゃんとD:\myDocuments\new内にフォルダが作られました。
なにか根本的な間違いをしているのでしょうか
0530名無しさん@お腹いっぱい。2012/04/02(月) 18:50:08.19
根本的にやり方が違うから動作しなくて当然
0531名無しさん@お腹いっぱい。2012/04/02(月) 19:47:04.69
まだ古いの使ってるヤツいるんだな
0532名無しさん@お腹いっぱい。2012/04/02(月) 19:58:39.56
最新verは8.2
0533名無しさん@お腹いっぱい。2012/04/02(月) 20:52:41.25
マジかよ
6.4で止まってる
斧にあるのか?
0534名無しさん@お腹いっぱい。2012/04/03(火) 00:28:49.65
本スレ
0535名無しさん@お腹いっぱい。2012/04/03(火) 00:57:48.90
本スレってどこだよ
0536名無しさん@お腹いっぱい。2012/04/03(火) 01:29:40.56
みんな斧から落とすんじゃないの?
検索からは6.4と6.3しか引っかからんけど
0537名無しさん@お腹いっぱい。2012/04/03(火) 07:00:41.55
>>532
なんの最新が8.2なんだ?
0538名無しさん@お腹いっぱい。2012/04/03(火) 08:14:26.77
自動取得の串が使い物にならないんだがどうしたものか
0539名無しさん@お腹いっぱい。2012/04/03(火) 12:34:06.46
そんなの飾りなんだしオリジナル使えよ
0540名無しさん@お腹いっぱい。2012/04/03(火) 18:07:49.83
>>536
いや誰かが転載してるだけでしょ
0541名無しさん@お腹いっぱい。2012/04/04(水) 08:34:28.72
斧のパスわかんねぇorz
0542名無しさん@お腹いっぱい。2012/04/04(水) 08:46:16.91
落とすもの減ったなあ。
0543名無しさん@お腹いっぱい。2012/04/04(水) 09:04:08.44
小物だか〜2Mで引っかかるのは転載じゃないだろ、そこでそもそも投下されてたんだから
で8.2がなんなんだよ、どこだってーの
0544名無しさん@お腹いっぱい。2012/04/04(水) 12:07:36.43
嘘を嘘と〜
0545名無しさん@お腹いっぱい。2012/04/04(水) 13:13:40.96
元々最新がUpされてる場所は斧
このスレ嫁ばバックアップしてるサイトも分かるはず
サイトに行けば過去に上げたのも全てあるから
0546名無しさん@お腹いっぱい。2012/04/04(水) 13:45:51.38
6.4が最新
以上
0547名無しさん@お腹いっぱい。2012/04/04(水) 15:00:35.49
(キリッ(笑
0548名無しさん@お腹いっぱい。2012/04/04(水) 16:58:05.22
今もそうかわからないけど、ehgmはちゃんとログインして自分のidとか持ってる人は
それ設定してやる方がいいんじゃね?今乱数で適当に生成してるでしょう
0549名無しさん@お腹いっぱい。2012/04/04(水) 18:08:58.81
スクプリト的には自分のIDとかどうでもいい
違いに差異は殆どない
0550名無しさん@お腹いっぱい。2012/04/04(水) 18:38:30.53
ehgm6.2使ってるんだけど、メモリリークっぽい動きをするのは仕様?
画像500枚連続で落とすと620MBもメモリ食ってるんだけど…
0551名無しさん@お腹いっぱい。2012/04/04(水) 18:58:03.12
まだ古いの使ってるヤツいるんだな
長時間使っても200MBぐらいだな
古いヤツはバグ多いから早めに変えた方がいいよ
0552名無しさん@お腹いっぱい。2012/04/04(水) 20:30:07.69
メモリリークの原因は画像の検証(整合性)の確認に問題があった
6.3まではehgm0110で使用してたのを変えずにいたからな
最初にバイナリで規定の文字列検索して弾かれると
メモリリークの原因となる検索方法に至るから
6.4はそれらを一掃してハッシュ比較に移行したので緩和と取得速度の向上は出来てる
まぁ6.3以前と6.4で比較すれば分かるよ

>>550
ただ6.3以前でメモリ食っても600以上行くことはない筈だが
どんな使い方してんだ?

利用者増えると使えない串が増えるな
昔は使うヤツ少なかったから気にしてなかったが
やはりオリジナル使う頃合いかな…orz
0553名無しさん@お腹いっぱい。2012/04/04(水) 20:40:52.36
>>551
新しい出てたのね。入れてきたわ

>>552
500枚くらいのファイルを3つくらい。順番に落としたらそうなってた
■ このスレッドは過去ログ倉庫に格納されています