find-grep-dired だと指定したディレクトリ以下の全ファイルを grep しますが、
これを指定したディレクトリ以下にある *.txt のみgrepすることはできませんでしょうか？