強化学習の応用として、ＰＣデスクトップ情報収集秘書を考えてみる。
ＰＤＳ（パーソナル・デスクトップ・セクレタリ）とかなんとか。

ユーザーがＰＣのブラウザからｸﾞｸﾞるのに使用した用語をＰＤＳは学習。
で、ＰＤＳはユーザーがＰＣを使っていない時間やＣＰＵ資源が空いてる時間
にさらにｸﾞｸﾞりまくって、要約集みたいなものを作成してローカルＨＤＤに保存。

ユーザーは、ＰＤＳがせっせと作成した要約集を時々目にして、気に入った
ら「よくできました」と褒めてやる（報酬を与える）。

ＰＤＳは自分の取った行動（ｸﾞｸﾞリ方と纏め方）と報酬期待値と実報酬を蓄積。
繰り返し。いつの日か、ユーザーには欠かせないデスクトップ情報収集秘書の
出来上がり。

仮にこういうのを作成したとすると、プログラムは勝手にｸﾞｸﾞる訳だから、
ワームだのウィルスだのと揶揄される可能性がある。
で、どーすべきなのかと。秘書同士が連絡を取り合うとさらに大変なことに。