質問です。
データを定期的に蓄積するPerlスクリプトを作っています。
新たに取得したデータリストはこれまで蓄積してきたデータファイルと照合して
これまでの中にないデータだけ、そのデータファイルに加えていきます。
この場合、
１、簡易掲示版のような普通のファイルで一行読み込んで配列に分割し、
照合後、保存する方法。
２、FreeBSDにデフォルトで備わっているDBMを使い、
Perlモジュールを使って書く方法。
３、MysqlもしくはPostgreSQLでPerlモジュールで書く。

のどれが一番早いでしょうか？
データ量はこれからどんどん増えていく予定です。
レコード数で数万単位くらいに膨らむかも知れません。

識者であるみなさまのアドバイスをお願いします。