>>859
たぶん調べてるんだろうけど、
http://ja.wikipedia.org/wiki/%E5%BD%A2%E6%85%8B%E7%B4%A0%E8%A7%A3%E6%9E%90
「単語の境界判別の問題」
　↓
「品詞判別の問題」
　↓
名詞のカテゴリを調べて「食べ物」だったら「好き／嫌い」程度の会話をつなげる。
くらいまでやれば、そこそこのものできるんじゃないか。
同ページにフリーのライブラリのリンクもあるみたいだし、あとは気合いだｗ

確率的言語モデルの基本は、単語／品詞について起こり得る全組合せパターンの中で、
出現確率が最も高い組合せを求める問題だから（要するに算数の組合せの問題）、
単純に考えればいい。