プログラム板より誘導されてきました。質問をさせてください
http://pc12.2ch.net/test/read.cgi/tech/1261057499/627-629

知りたいことは、インターネットのＵＲＬそのものを検索するためのプログラムを組むことは出来るか、です
そのためのプログラム言語は、何がいいのかもあわせて知りたいです

例ですが、こういうのです

↓これはグーグルのトップページですが
１．http://www.google.co.jp/
　グーグルについてを押すと以下のページになります
２．http://www.google.co.jp/intl/ja/about.html
　これは公開されている部分なのですが、隠しページなどを検索したい（グーグルのではありません）ので、
　１．の後に続いている２．の「intl/ja/about.html」この部分が不明だとして、その不明部分を検索するプログラムを作りたいと思っています

その場合に、まず、上記のような検索プログラムは可能かということ
可能であれば、どの言語でプログラムを組むのが適しているかということ
上記２点を知りたいです

また、参考になるページなどもありましたら、紹介いただけるとありがたいです
よろしくお願い致します