■ read.cgi(DSO味)の巻 part1 (2004/12/01-)

**FOX ★** · 04/12/01 17:15:13

■ read.cgi(DSO味)の巻 part1 (2004/12/01-)

「どっちの作業がより負荷低減に寄与するか」を考えると
現状を見るに read.cgi(DSO味) ですなぁ、
もう一個の方は手強そうだしねぇ

やり方は三通りかな、、、

1) read.cgi(v8.01) に必要な機能を組み込んでいく
2) read.cgi(v7.xx) をDSO味にする。
3) 一から作る。(最初から DSO を意識したのにする。)

前スレ等(事の発端)

read.cgi再開発スレ
http://qb5.2ch.net/test/read.cgi/operate/1087199303/

【Project peko】2ch特化型サーバ・ロケーション構築作戦 Part15
http://qb5.2ch.net/test/read.cgi/operate/1093068260/

**root ★** · 04/12/01 17:44:06

2) と 1) の両面作戦かなぁ。
個人的には、先に 2) かなと。

**FOX ★** · 04/12/01 17:50:08

おおっ

3) にしようかなと思っていたりして、

**root ★** · 04/12/01 17:52:45

>>3
すばらしいです。(素)

私は主に tuner & installer & patcher なんで、むりぽですね。
作る方が気持ちよく作れるように、あるいは作ったものが気持ちよく動くようにするのが、しあわせ。

◆7COBLlYL2k · 04/12/01 17:53:15

>>3
がんばれー

**FOX ★** · 04/12/01 17:57:17

read.cgi も建て増し、建て増しでここまで来ているんで
だんだん醜い姿になっとるです。ここは人生やり直しも一興かと、

**FOX ★** · 04/12/24 23:02:39

今日から書き始めた
いろいろ実験したいから本体はまだまだ先かと、

**名無しさん＠お腹いっぱい。** · 04/12/25 00:06:07

　　　　　 ∩
　　(　ﾟ∀ﾟ)彡　実験!!実験!!
　　　 ⊂彡

**名無しさん＠お腹いっぱい。** · 04/12/29 00:07:46

>>7
がんがってくれ

**FOX ★** · 05/01/02 01:40:08

日本時間
PATH_INFO
QUERY_STRING
が取れるようになりました。

**名無しさん＠お腹いっぱい。** · 05/01/02 01:45:35

ほうほう

**名無しさん＠お腹いっぱい。** · 05/01/02 13:15:23

どれどれ……。

Hello 2ch !!
2005/01/02 13:14:04 日本時間が取れるようになりました。
/myanmar/1101888913/l50 PATH_INFO
(null) QUERY_STRING

read.cgi ver 05.0.0.2
FOX ★

Hello 2ch !!
2005/01/02 13:14:24 日本時間が取れるようになりました。
PATH_INFO
bbs=myanmar&key=1101888913&ls=50 QUERY_STRING

read.cgi ver 05.0.0.2
FOX ★

**名無しさん＠お腹いっぱい。** · 05/01/02 16:29:07

/read.cgi/<b>テスト</b>
とかやっていろいろ表示させると面白いな。

◆IzXu3gqo6w · 05/01/02 21:30:36

part2は必要？

**FOX ★** · 05/01/02 22:13:10

どうだろ
日曜大工みたいなもんだから
いつまでかかるやら。。。

**FOX ★** · 05/01/03 03:34:59

ちと　進んだ、

<form> も出して　書き込みまで挑戦してみよう

**名無しさん＠お腹いっぱい。** · 05/01/03 03:38:39

vxxb

**FOX ★** · 05/01/03 05:25:16

なんとなく
レス番の指定の部分を組み込んでみた
なんとなく動いているかな?

あとは
1) 広告対応
2) 本文の<a> 置き換え
3) その他 2005年仕様のデコレーション
こんなとこかしら

変な指定時は落ちまくると思われ、

**FOX ★** · 05/01/03 05:26:48

レス番の指定でのバグ報告きぼー

あっ　あと昔の指定方法 ?st=xxx&to=kkk&nofirst 等は何も組み込んでいないです
このまま何もしなくても良くならないかな・・・

**名無しさん** · NG

http://dso.2ch.net/test/read.cgi/myanmar/1101888913/
1だけ

http://dso.2ch.net/test/read.cgi/myanmar/1101888913/1-
1と2だけ

http://dso.2ch.net/test/read.cgi/myanmar/1101888913/3-
1と3だけ

**名無しさん** · NG

＞19
昔の指定方法は、無くてもいんじゃないっすか。
read.cgiの用途であるところの、一般ブラウザからの利用では使われないっしょ。

**FOX ★** · 05/01/03 06:53:13

本来どうなるかも教えてくれると嬉しいです

**名無しさん＠お腹いっぱい。** · NG

本来、

http://dso.2ch.net/test/read.cgi/myanmar/1101888913/
全レス

http://dso.2ch.net/test/read.cgi/myanmar/1101888913/1-
1以降全部

http://dso.2ch.net/test/read.cgi/myanmar/1101888913/3-
3以降全部

**名無しさん＠お腹いっぱい。** · NG

あ、3以降全部の奴は、1も表示されるんが普通

◆X7F1FulWvk · 05/01/03 11:34:33

おにいさまステキーー

**名無しさん＠お腹いっぱい。** · NG

http://qb5.2ch.net/test/read.cgi/operate/1087199303/l5
最新から5レス分表示、ただし最も古いレスの所には1が出てくる（合計5レス分）。

http://qb5.2ch.net/test/read.cgi/operate/1087199303/l5n
最新から5レス分表示のみ。1は出てこない。

http://qb5.2ch.net/test/read.cgi/operate/1087199303/ln
1を除いた全レスを表示。
http://qb5.2ch.net/test/read.cgi/operate/1087199303/1000-
1のみ表示。

http://dso.2ch.net/test/read.cgi/myanmar/1101888913/l5
http://dso.2ch.net/test/read.cgi/myanmar/1101888913/l5n
最新から5レス分と1が表示される（合計6レス分）。

http://dso.2ch.net/test/read.cgi/myanmar/1101888913/ln
http://dso.2ch.net/test/read.cgi/myanmar/1101888913/1000-
Internet Explorer は、要求された Web ページにリンクできませんでした

微妙に微妙に挙動が違うかなと思った部分です。

**名無しさん＠お腹いっぱい。** · 05/01/03 13:34:01

>>19
bbs=とkey=だけでも実装希望。
read.cgi経由で古い過去ログが見れなくなっちゃうから。

**FOX ★** · 05/01/03 15:57:44

どうだろ、どうだろ
修正してみた　>>23 >>26

>>27
やっぱ　そうですかねぇ

**FOX ★** · 05/01/03 17:37:17

read.cgi ver 05.0.0.4 2005/01/03 をnews19(newsplus) に入れてもらった。

そいえば過去ログは・・・　まだ未実装

**名無しさん＠お腹いっぱい。** · 05/01/03 17:57:23

できれば日付の前に：を入れて欲しいな。

◆agi1qrhW5g · 05/01/03 18:12:21

50しか表示されなかったのは…仕様ということで

**FOX ★** · 05/01/03 18:27:51

>>30
入れてみた

**名無しさん＠お腹いっぱい。** · 05/01/03 18:48:38

エラーありまくりだぞ。俺は技術者じゃないからエラーの詳細なんて語れないのさ。
以上報告終わり。

**FOX ★** · 05/01/03 18:50:15

完成は桜が咲く頃かと、、

毎週日曜日にコツコツと

**名無しさん＠お腹いっぱい。** · 05/01/03 19:14:57

>>33
おとなしく専ブラでも使っとけ

**FOX ★** · 05/01/03 19:29:16

ex7 , ex9 に入れてみた。

**FOX ★** · 05/01/03 19:33:04

live8 にもいれた。

**名無しさん＠お腹いっぱい。** · NG

>>28
おつです。
存在しないレス番号を指定すると、何も表示されないという事態は回避できているので
まずはOKかと。

ver2005は、ｌだけだと、最新10と認識されるのか。
今までのreadだと、見た感じでは、lの後に数字が来ない場合
lは無視してnのみが有効になっているぽいですけど。

**名無しさん＠お腹いっぱい。** · NG

dat落ちしたのを見るとまた新鮮な味わいが

**名無しさん＠お腹いっぱい。** · 05/01/03 20:03:13

ここに書いていいのか分からないが、昔みたいに曜日を入れて（　ﾟдﾟ）ﾎｽｨ…

05/01/03 20:06:45

汎用ブラウザからリンクが踏めません。
レスが１００こえてるけど
■掲示板に戻る■ 全部 1- 最新50
しかありません。
ガイシュツだったらすみません。

**FOX ★** · 05/01/03 20:58:27

汎用ブラウザって?

細切れ転送はやめようかと思っている

**名無しさん＠お腹いっぱい。** · 05/01/03 21:33:40

IEとかでhttpのハイパーリンクができないってことでわ
>>27と同じ？

**名無しさん＠お腹いっぱい。** · 05/01/03 21:48:38

全レス表示
http://qb5.2ch.net/test/read.cgi/operate/1087199303/
http://qb5.2ch.net/test/read.cgi/operate/1087199303

全レス表示：OK
http://dso.2ch.net/test/read.cgi/myanmar/1101888913/

全レス表示：NG
http://dso.2ch.net/test/read.cgi/myanmar/1101888913

**FOX ★** · 05/01/03 21:57:26

>>44
なおしたー

**名無しさん＠お腹いっぱい。** · 05/01/04 02:43:01

>>1だと、うちのIEからだと
---
1 ：FOX ★：04/12/01 17:15:13 ID:???
@
---

>>44だと、
---
44 ：名無しさん＠お腹いっぱい。：05/01/03 21:48:38 ID:???
@
---

しか表示されないんですけど

**FOX ★** · 05/01/04 02:54:21

単にデバッグ中だっただけかと、

**名無しさん＠お腹いっぱい。** · 05/01/04 03:08:42

了解しました、、、よかた
お騒がせしましたー。

**名無しさん＠お腹いっぱい。** · 05/01/04 21:21:18

>>42
その仕様にされると、出先のナロー回線からだと不便でしょうがないんですが…
とりあえず
read.cgi ver7.35p (04/11/01)
を返してください。

**名無しさん＠お腹いっぱい。** · 05/01/04 21:27:23

>>49
人間諦めが肝心です

**名無しさん＠お腹いっぱい。** · 05/01/04 21:28:59

例えば、ながーいスレがあったときに、
従来の 1- 101- 201- 301- みたいなリンクがあったときは
既に開いた部分はブラウザの機能で紫になるから
100レスごとに「ここまで読んだ」的な使い方ができたわけです。
わざわざ機能削減する理由が知りたいです。

**名無しさん＠お腹いっぱい。** · 05/01/04 22:10:15

>>51
シンプル・イズ・ベスト

**名無しさん＠お腹いっぱい。** · 05/01/04 23:03:43

http://qb5.2ch.net/test/read.cgi/operate/1087199303/200
前100 → 100-199
http://dso.2ch.net/test/read.cgi/myanmar/1102008822/200
前100 → 99-199

http://qb5.2ch.net/test/read.cgi/operate/1087199303/-9
「前100」は表示されない
http://dso.2ch.net/test/read.cgi/myanmar/1102008822/-9
前100 → 1-1

http://qb5.2ch.net/test/read.cgi/operate/1087199303/9999
レスは表示されない
http://dso.2ch.net/test/read.cgi/myanmar/1102008822/9999
全レス表示される

**名無しさん＠お腹いっぱい。** · 05/01/05 07:37:22

鯖負荷の観点るなら、
.datを変換して各レスをHTMLとしたものを、メモリ上にキャッシュしておけばよいですよ。
携帯を無視していいから、基本的にHTMLの形式は一つで良いし。
>>nnのリンクは、各スレの1に書いてあるものと、
自身のレス番号以前に対するものだけで充分ですね。
(時間帯による>>リンクの省略はやめる)

こうして必要になった分だけ変換して出力するようにしておけば
大半は、各レスを順番に出力するだけで済むようになります。

また、read.cgiの呼び出し形を分析、統計を取って
l50が極端に多いとかがわかれば、出力全体をキャッシュすることも考えるべきですね。
もちろん、圧縮後のバイナリイメージも含めて。
この場合、末尾の/が不足したり多すぎたりする呼び出し、及び
旧形式のスレ指定での呼び出しに対しては
301を返してリダイレクトするべきですね。
この辺は、昔read.cgi改良時に議論されていましたが
CGIの負荷が大きいからという理由で
リダイレクトをやめてbase出力となった経緯があります。

ただ、効率よくするには多数のスレをキャッシュする必要があり
preforkだと、殆どキャッシュ効果がもてない程度のスレしか保持できないと思います。
「バックエンドでマルチスレッド型httpd」を勧めるのは、これが大きな理由だったりします。

◆cZfSunOs.U · 05/01/05 08:40:52

HTML 出力をキャッシュするということなら，Last-Modified を吐くようにした上で
mod_cache を使う，という方法も考えられますね．

**名無しさん＠お腹いっぱい。** · 05/01/05 09:41:38

せめて、.datの形式に由来する非効率な行頭走査だけでも
省略できないか考えてみましたが
行頭を保持するのに、1つのスレで4KB、100個キャッシュで400KB、
プロセス1000個で400MB、ちょっと苦しいですかね。

その他に、行頭だけを保存したインデックスファイルを作り
それをmmapしたまま.datの更新時刻と共に保持、
.datが更新されたのを検出したら、インデックスに追加する
というのも考えましたが、、
各ファイルのfdはcloseしておくとしても
1つのプロセスでmmapされた領域が100個、
システム全体でmmap領域が100K個というのは
どこかに悪影響が出そうな気がします。

複数のインデックスをまとめて１つのファイルにすると
管理の、特に排他処理と追加/削除がかなり面倒なことになりそうです。

**FOX ★** · 05/01/05 18:23:50

read.cgi ver 05.0.0.6 2005/01/05

これで　基本機能は網羅した予感。

**名無しさん＠お腹いっぱい。** · 05/01/05 20:29:08

41さんのが変わってないですorz

**名無しさん＠お腹いっぱい。** · 05/01/06 07:01:11

>>27再考お願いします。