トップページunix
1001コメント225KB

連番のH画像/動画を一気にダウンロードするX

■ このスレッドは過去ログ倉庫に格納されています
0001名無しさん@お腹いっぱい。2011/12/03(土) 15:58:59.38
ギボンヌ

連番のH画像/動画を一気にダウンロードする4
http://hibari.2ch.net/test/read.cgi/unix/1305422004/
前スレ 連番のH画像/動画を一気にダウンロードする3
http://hibari.2ch.net/test/read.cgi/unix/1272561192/
前々スレ 連番のH画像/動画を一気にダウンロードする2
http://pc12.2ch.net/test/read.cgi/unix/1135533382/
前々々スレ 連番のH画像を一気にダウンロードする
http://pc8.2ch.net/test/read.cgi/unix/979106537/
0477名無しさん@お腹いっぱい。2012/03/22(木) 02:02:56.52
結局リトライ頻発の原因は利用者が増えすぎて串が駄目になってきてるってことでいいの?
生だと落とせる量に制限あるけど、改善されていかないようなら妥協した方がいいんかな?
0478名無しさん@お腹いっぱい。2012/03/22(木) 02:06:10.61
>>475
今はver5からソースのみ串通して画像は全て生IPで落とすようにしてあるが
いつのver事を言ってるんだ?
串使う=串&鯖負荷が原因で正常取得できないor落とすのに時間かかる=画像破損につながる
って意味だったはずだが
0479名無しさん@お腹いっぱい。2012/03/22(木) 02:09:05.61
>>477
ソースを串取得にしてあるから結局は利用者増えると頻発は必然だね
前だと生IPで150前後で規制入るっぽい仕様変更あったら知らんが
0480名無しさん@お腹いっぱい。2012/03/22(木) 02:10:49.06
ツールの作者好きだよ
セックスしよ
0481名無しさん@お腹いっぱい。2012/03/22(木) 02:14:57.92
>>479
なるほど、てことはもし未だに規制が存在するなら、
>>478でver5以降は画像取得そのものは生使ってるって書いてあるから、
それ以上取りたいならそれより前ver使えってことでOK?
0482名無しさん@お腹いっぱい。2012/03/22(木) 02:17:14.41
生IP取得になってからは画像破損がかなり減っている筈
今の最新6.4からは
レジューム=鯖負荷が原因で破損する時のみ作成される仕様にしてある
0483名無しさん@お腹いっぱい。2012/03/22(木) 02:20:25.17
つーかそもそもそんなに破損するもん?
verifyなんちゃらだけじゃチェックできないってこと?
0484名無しさん@お腹いっぱい。2012/03/22(木) 02:21:03.10
>>481
完全に切り分けできてないがソースに規制はいってるが
画像自体は入っていない

>それ以上取りたいならそれより前ver使えってことでOK?
なぜそうなるのか教えて?
0485名無しさん@お腹いっぱい。2012/03/22(木) 02:23:13.88
>>483
鯖負荷が原因だからこちらではなんとも言えんな
原因が取得方法でなくなったから確認回数増やせばそのうち落とせるけど
0486名無しさん@お腹いっぱい。2012/03/22(木) 02:30:17.38
>>484
つまり規制が入ってるソースにおいてのみ串使ってるから、
その後生で画像取っても規制には引っかからないってことですね…
ちょっと勘違いをしてました。
てっきり画像自体にも規制があるものだと思っていたので、
ver5から画像取得が生に以降したということは、
それ以前のver4なら画像取得も串利用だから、規制から逃れられる
という風に解釈してました
無知識で質問してしまったので、噛み合わなくて「何言ってんだこいつ」と感じるかもしれません…すいませんでした
0487名無しさん@お腹いっぱい。2012/03/22(木) 02:48:35.71
バカな原始猿のくせに人間のツール使うなよ
0488名無しさん@お腹いっぱい。2012/03/22(木) 10:34:40.49
やってることは必死こいてオカズ集めてマスかいてるだけなんだから全員猿みたいなもんだろ
0489名無しさん@お腹いっぱい。2012/03/22(木) 10:52:22.92
ワロタ
0490名無しさん@お腹いっぱい。2012/03/22(木) 11:23:29.54
最新verだからといって一部のアドレスでCant find first pageってなる現象が無くなったわけではないのね
サムネアドから画像1枚目のアドに入れ直すのがだるい…
0491名無しさん@お腹いっぱい。2012/03/22(木) 12:25:05.01
>一部のアドレスでCant find first pageってなる現象
ってどれ?
串変わっても永遠に表示されて落とせないの?
原因のほとんどが串だから串が変われば落とせるはずだが

>サムネアドから画像1枚目のアドに入れ直す
そんな面倒なこと一度もやったことないな放置してれば落ちるからな
0492名無しさん@お腹いっぱい。2012/03/22(木) 12:44:00.58
>>491
Cant find first page from キューリストに入れたアドレス
って感じに出てその後Retry download、串変わって上の繰り返し
このスレのどっかでアドを画像の一枚目のページに変えたら解決したって書いてあったから、
それやるしかないんかなぁと
キューリストに入れたアドレスの2/3位がその現象になって参る
0493名無しさん@お腹いっぱい。2012/03/22(木) 12:54:41.17
>>492
原因串だから常時繰り返すなら再度実行したほうがいいかな
一応分散目的で複数サイトから串使うようにしてあるが
微妙なサイトもあるからオリジナルの串リスト使うとかで回避かな

ソースを串で取得は規制回避のためだから生取得は規制されるのでその辺は各自判断で
まぁエラーあっても放置が一番楽だよ
0494名無しさん@お腹いっぱい。2012/03/23(金) 13:44:06.68
みなさんexからDLできてますか?
0495名無しさん@お腹いっぱい。2012/03/23(金) 14:57:58.34
このサルは何時の話をしてんだ?
サルじゃこのスレすら読めないか…
0496名無しさん@お腹いっぱい。2012/03/23(金) 17:02:31.94
かまうなよ。
0497名無しさん@お腹いっぱい。2012/03/23(金) 17:38:17.28
彼女どころか、センズリのネタすら自分で調達出来ない
0498名無しさん@お腹いっぱい。2012/03/23(金) 17:46:30.47
その点俺らは立派だよな
自分のオナネタくらい自分で集められるんだから
0499名無しさん@お腹いっぱい。2012/03/23(金) 18:08:07.77
うむ立派だな、猿もマスかきゃ木に登るってやつか
0500名無しさん@お腹いっぱい。2012/03/23(金) 18:16:52.69
ログインせずにloliタグが付いてるindex見るにはどうすればいいんだ?
クッキでどうにかならんかな?
0501名無しさん@お腹いっぱい。2012/03/23(金) 23:33:10.76
Q)ならぬなら?
1)出来るようになるまで待つ。
2)出来るようにしてみる。
3)けっ、どうせ屑漫画だろ見たくもねぇつぶれろ変態。
0502名無しさん@お腹いっぱい。2012/03/24(土) 01:47:24.49
4)オカズなしで試みる
5)なんとか人に頼み込む
6)二次元は諦めて・・・
7)寝る
0503名無しさん@お腹いっぱい。2012/03/24(土) 05:48:15.78
indexに入れない時の日本語タイトルの取得方法なんかある?
現状だと個別ページで取得するから英語になるんだよね
0504名無しさん@お腹いっぱい。2012/03/24(土) 18:08:30.82
おわああああああああああああああああああああああああああああああああああああああああああああああああsclpmさえおふぃhヴぃおj
0505名無しさん@お腹いっぱい。2012/03/25(日) 01:11:54.23
A)中州で抜こう!
0506名無しさん@お腹いっぱい。2012/03/25(日) 02:20:52.16
おっぱい画像を落とす云々があったけど
あれ生温いよなあ
0507名無しさん@お腹いっぱい。2012/03/27(火) 01:06:03.52
起動させて放置して確認したら、
名前が付いたフォルダはあっても中身が空なのがちらほら。
しばらく試行して駄目だったら閉じる仕様なんでしょうか?
0508名無しさん@お腹いっぱい。2012/03/27(火) 18:51:59.23
過去スレ嫁
同じ質問繰り返すんじゃねーよサル
0509名無しさん@お腹いっぱい。2012/03/27(火) 19:21:47.67
>>507-508
同じ遣り取りをするサル(笑)
0510名無しさん@お腹いっぱい。2012/03/27(火) 22:57:43.37
ehgm0110 NYSL Version 0.9982 を利用中。
長時間利用していると、out of memoryになるんだけど、
どの変数がメモリ食い続けてるのか分かる人いる?

ソース見ても、えんえんとデータため続けるような変数は見当たらないんだが。
0511名無しさん@お腹いっぱい。2012/03/27(火) 23:19:43.64
そんな古いの低能なサルしか使ってねーよ
0512名無しさん@お腹いっぱい。2012/03/27(火) 23:22:56.08
IDが表示されないって便利だな
0513名無しさん@お腹いっぱい。2012/03/27(火) 23:40:34.62
えー古いのー!?
多少いじったけど普通に動くから、思いもしなかった…
0514名無しさん@お腹いっぱい。2012/03/28(水) 02:10:56.58
>>508
前々からある現象だったんですか…
新しいverに変えてから起こりだしたから、
現行スレだけしか見てませんでした。
申し訳ありません
0515名無しさん@お腹いっぱい。2012/03/28(水) 05:48:39.47
>>507,514
>名前が付いたフォルダはあっても中身が空なのがちらほら。
>新しいverに変えてから起こりだしたから、
今の最新6.4だと通常に実行して画像取得失敗してもレジュームが残る仕様になってるから
完全に空になることはない
元々2バイト環境下で実行できるようになってないから

たぶん過去スレ同様だと思うが↓
986 名前:名無しさん@お腹いっぱい。[sage] 投稿日:2011/12/02(金) 10:18:10.80
>>983
ehgm2ver3をとったそのままの状態で特になにもいじらずに使ってる
終わった後のフォルダ見たら、フォルダの中にフォルダがあってっていうのが続いて、
途中途中に画像がある(途中で串変えながら取ってるから?)、それでフォルダの一番奥に拡張子無しのが2、3個ある感じ
やり直したら全部マトモに取れたりするから、URLはあんまり関係無いかもしれんけど、
http://exhentai.org/g/436167/80b6b58814/ とか
酷いときは8個ぐらいリストに入れて全部なったりする

987 名前:名無しさん@お腹いっぱい。[sage] 投稿日:2011/12/02(金) 12:07:19.54
>>986
フォルダの中にフォルダ作成されるのは環境問題
plの実行場所に問題があると思う
全体的に見て日本語フォルダ配下にplが入ってないか?
plの実行パスに日本語(2バイト文字)が含まると
フォルダが重複されるのは確認してるpl内の問題
0516名無しさん@お腹いっぱい。2012/03/30(金) 20:18:07.39
exパンダなんだけどw
俺に叡智を授けてくれ
0517名無しさん@お腹いっぱい。2012/03/30(金) 20:31:37.44
パンダだってサルにはお似合いじゃん
0518名無しさん@お腹いっぱい。2012/03/30(金) 21:18:53.38
マッチが届けてくれたんじゃねえか
0519名無しさん@お腹いっぱい。2012/03/30(金) 23:12:38.65
ex最近koreanとかchinese多すぎでウンザリ
0520名無しさん@お腹いっぱい。2012/03/31(土) 11:28:24.38
貰ってばかりの奴が文句いう筋もなかろうに。
Keywrod に '-korean' 追加すると korean を含むものを除外するって知らん訳じゃないよな。
0521名無しさん@お腹いっぱい。2012/03/31(土) 16:08:53.10
知ってたらウンザリしないだろ
ちょっと考えればわかるのに、馬鹿かお前はw
0522名無しさん@お腹いっぱい。2012/03/31(土) 18:06:22.64
当然知ってるけど一々入力するのメンドイ
0523名無しさん@お腹いっぱい。2012/03/31(土) 22:39:45.85
自分で search plugin 書けばいいじゃん
0524名無しさん@お腹いっぱい。2012/04/02(月) 01:32:58.43
レジューム用ログってフルパスでもおっけー?
その場合はどう記述すればいいん?
0525名無しさん@お腹いっぱい。2012/04/02(月) 06:37:39.54
-Dのオプションが効きません
-dやオプション無しでディレクトリー指定した時にはちゃんと機能するのですが
-D の時はデフォルトのdownloadにファイルが保存されてしまいます
解決方法はあるでしょうか
0526名無しさん@お腹いっぱい。2012/04/02(月) 07:09:28.55
>>524
古い奴ならフルパスでも使えるはず

>>525
-Dは落とす場所の指定で
-dって格納フォルダを個別指定だよな
-D使う時どのように実行してる?
0527名無しさん@お腹いっぱい。2012/04/02(月) 07:26:25.37
>>526
perl ehgm.pl queue_list.txt -P proxy_list.txt -D D:\myDocuments\new

といった感じに。
D:\myDocuments\new以下に作品名のフォルダが作られてその中にファイルが落ちるといった挙動を想定していたんですが
デフォの保存フォルダに作品名フォルダが作られてその中に保存されるだけでした
0528名無しさん@お腹いっぱい。2012/04/02(月) 12:34:53.44
指定方法に問題があるね
pl内確認してもう一度やってみな
その程度も分からなければ諦めることだ
0529名無しさん@お腹いっぱい。2012/04/02(月) 17:48:21.85
perl ehgm.pl queue_list.txt -P proxy_list.txt -D 'D:/myDocuments/new'
のようにしても
perl ehgm.pl queue_list.txt -P proxy_list.txt -D './hoge/'
のようにしてもデフォルトの設定のままでした。

ちなみに試しにehgm.pl内の該当項目を
my $defaultBaseDir = 'D:/myDocuments/new';
のようにしてやるとちゃんとD:\myDocuments\new内にフォルダが作られました。
なにか根本的な間違いをしているのでしょうか
0530名無しさん@お腹いっぱい。2012/04/02(月) 18:50:08.19
根本的にやり方が違うから動作しなくて当然
0531名無しさん@お腹いっぱい。2012/04/02(月) 19:47:04.69
まだ古いの使ってるヤツいるんだな
0532名無しさん@お腹いっぱい。2012/04/02(月) 19:58:39.56
最新verは8.2
0533名無しさん@お腹いっぱい。2012/04/02(月) 20:52:41.25
マジかよ
6.4で止まってる
斧にあるのか?
0534名無しさん@お腹いっぱい。2012/04/03(火) 00:28:49.65
本スレ
0535名無しさん@お腹いっぱい。2012/04/03(火) 00:57:48.90
本スレってどこだよ
0536名無しさん@お腹いっぱい。2012/04/03(火) 01:29:40.56
みんな斧から落とすんじゃないの?
検索からは6.4と6.3しか引っかからんけど
0537名無しさん@お腹いっぱい。2012/04/03(火) 07:00:41.55
>>532
なんの最新が8.2なんだ?
0538名無しさん@お腹いっぱい。2012/04/03(火) 08:14:26.77
自動取得の串が使い物にならないんだがどうしたものか
0539名無しさん@お腹いっぱい。2012/04/03(火) 12:34:06.46
そんなの飾りなんだしオリジナル使えよ
0540名無しさん@お腹いっぱい。2012/04/03(火) 18:07:49.83
>>536
いや誰かが転載してるだけでしょ
0541名無しさん@お腹いっぱい。2012/04/04(水) 08:34:28.72
斧のパスわかんねぇorz
0542名無しさん@お腹いっぱい。2012/04/04(水) 08:46:16.91
落とすもの減ったなあ。
0543名無しさん@お腹いっぱい。2012/04/04(水) 09:04:08.44
小物だか〜2Mで引っかかるのは転載じゃないだろ、そこでそもそも投下されてたんだから
で8.2がなんなんだよ、どこだってーの
0544名無しさん@お腹いっぱい。2012/04/04(水) 12:07:36.43
嘘を嘘と〜
0545名無しさん@お腹いっぱい。2012/04/04(水) 13:13:40.96
元々最新がUpされてる場所は斧
このスレ嫁ばバックアップしてるサイトも分かるはず
サイトに行けば過去に上げたのも全てあるから
0546名無しさん@お腹いっぱい。2012/04/04(水) 13:45:51.38
6.4が最新
以上
0547名無しさん@お腹いっぱい。2012/04/04(水) 15:00:35.49
(キリッ(笑
0548名無しさん@お腹いっぱい。2012/04/04(水) 16:58:05.22
今もそうかわからないけど、ehgmはちゃんとログインして自分のidとか持ってる人は
それ設定してやる方がいいんじゃね?今乱数で適当に生成してるでしょう
0549名無しさん@お腹いっぱい。2012/04/04(水) 18:08:58.81
スクプリト的には自分のIDとかどうでもいい
違いに差異は殆どない
0550名無しさん@お腹いっぱい。2012/04/04(水) 18:38:30.53
ehgm6.2使ってるんだけど、メモリリークっぽい動きをするのは仕様?
画像500枚連続で落とすと620MBもメモリ食ってるんだけど…
0551名無しさん@お腹いっぱい。2012/04/04(水) 18:58:03.12
まだ古いの使ってるヤツいるんだな
長時間使っても200MBぐらいだな
古いヤツはバグ多いから早めに変えた方がいいよ
0552名無しさん@お腹いっぱい。2012/04/04(水) 20:30:07.69
メモリリークの原因は画像の検証(整合性)の確認に問題があった
6.3まではehgm0110で使用してたのを変えずにいたからな
最初にバイナリで規定の文字列検索して弾かれると
メモリリークの原因となる検索方法に至るから
6.4はそれらを一掃してハッシュ比較に移行したので緩和と取得速度の向上は出来てる
まぁ6.3以前と6.4で比較すれば分かるよ

>>550
ただ6.3以前でメモリ食っても600以上行くことはない筈だが
どんな使い方してんだ?

利用者増えると使えない串が増えるな
昔は使うヤツ少なかったから気にしてなかったが
やはりオリジナル使う頃合いかな…orz
0553名無しさん@お腹いっぱい。2012/04/04(水) 20:40:52.36
>>551
新しい出てたのね。入れてきたわ

>>552
500枚くらいのファイルを3つくらい。順番に落としたらそうなってた
0554名無しさん@お腹いっぱい。2012/04/04(水) 22:07:19.71
>>541
ひんと
ニュー速
0555名無しさん@お腹いっぱい。2012/04/05(木) 09:02:44.81
ハッシュ比較って何してるの?
htmlにmd5でも書いてあるの?
0556名無しさん@お腹いっぱい。2012/04/05(木) 12:45:54.95
過去スレ嫁ば分かるよ
ヒントは画像取得時のURL
0557名無しさん@お腹いっぱい。2012/04/05(木) 13:17:02.42
なるほどどっかに書いてあるのね
それだけわかればいいや
あんがと
0558名無しさん@お腹いっぱい。2012/04/05(木) 13:45:01.34
まんまsha1なのね
判定素直になったよ
0559名無しさん@お腹いっぱい。2012/04/06(金) 17:12:44.71
最近e,exを見つけた初心者だけださ
もちろんプログラミングとか言っちゃうくらい知識ゼロなんだけど
ehgm0110でもログをしっかり読んでたら落とせてるよ>e-,ex-hentai
ロダ探してもver2とか6.4とか落とせ無いやんけ

聞いてる奴らはさ
つまりだエロさが足りないって事だよ
0560名無しさん@お腹いっぱい。2012/04/06(金) 20:08:31.74
妄想、乙www
0561名無しさん@お腹いっぱい。2012/04/06(金) 20:26:52.16
スレ嫁ばロダの場所くらい分かるだろ
0562名無しさん@お腹いっぱい。2012/04/06(金) 21:54:30.43
日本語タイトルに~が含まれると保存フォルダがちゃんとタイトル取得しないの直らないかなー
0563名無しさん@お腹いっぱい。2012/04/06(金) 22:31:45.79
自分で直せばいいんじゃね。
それをエスケープするなり、別な文字に変えるなりすればいいだけだろう。
0564名無しさん@お腹いっぱい。2012/04/07(土) 00:18:39.58
参考にするから「俺様のはそのへんに出回ってるのとはココが違うのだよ」っていう自慢を聞かせてくれ。
0565名無しさん@お腹いっぱい。2012/04/07(土) 08:45:55.59
串を非同期で取得、速度評価して優先度付きで
dbに保存したものを使ってるとかそのくらいかな
あとはオプションで最大プロセス数とダウンロード速度を
指定できたりもする
verify_jpegとかehgmから拝借してたけど
sha1見るようになって借りてるコードなくなったかも
0566名無しさん@お腹いっぱい。2012/04/07(土) 20:21:59.63
ほうほう、で他の皆は?
0567名無しさん@お腹いっぱい。2012/04/07(土) 21:10:21.56
妹ロダとかにも対応してる
0568名無しさん@お腹いっぱい。2012/04/08(日) 03:29:13.92
ルビーで同じの作ってみた
0569名無しさん@お腹いっぱい。2012/04/08(日) 08:25:03.08
Ctrlを押しながらドロップしたギャラリーは、(もしあれば)最初のページだけオリジナルサイズで取ってくる。
0570名無しさん@お腹いっぱい。2012/04/10(火) 01:18:49.72
ttp://exhentai.org/g/480783/63701c243f/
ここまでやるとちょっとスゲェ
0571名無しさん@お腹いっぱい。2012/04/12(木) 08:15:23.20
泥のブラウザからリモートで飛ばせるようにしたけどオナニー捗るな
0572名無しさん@お腹いっぱい。2012/04/12(木) 08:17:08.56
>>570
なにが
0573名無しさん@お腹いっぱい。2012/04/13(金) 06:49:14.27
アドオンでいいや。
0574名無しさん@お腹いっぱい。2012/04/13(金) 18:52:31.55
>>532
どこにあるんだよ
0575名無しさん@お腹いっぱい。2012/04/13(金) 20:03:55.46
何探しんてんだこのアホは?
0576名無しさん@お腹いっぱい。2012/04/13(金) 20:04:39.31
最近落とすものなくね?
0577名無しさん@お腹いっぱい。2012/04/13(金) 20:09:50.95
>>575
>>522

>>576
至極たま〜にあるから困る。
■ このスレッドは過去ログ倉庫に格納されています