テキストマイニング（形態素解析）ならフリーのツールがあります。
KH Coder
http://khc.sourceforge.net/
ChaSen
http://chasen-legacy.sourceforge.jp/
概略はここを参考にしてください。
http://www.atmarkit.co.jp/ad/spss/spss0109/index.html#1
投稿日時 - 2008-09-16 22:06:35
1人が「このQ&Aが役に立った」と投票しています
ベストアンサー以外の回答（1件中 1～1件目)
>何千もの言葉やキーワードの重複を一度にチェックするツールを探しています。
もう少し要件を限定してほしいですね。
何千もの言葉やキーワードは例えば、スペースやカンマで区切られているのですか？
それとも元となる文章から単語を切り出す所から作業をするのですか？
また重複をチェックして、結果として何を得たいのですか？
・重複しているかどうかを判定(YES/NO)したい
・重複している単語を抽出したい
・重複を除いたキーワードのリストを得たい
ついでに一括でするというのは、言葉やキーワードが格納されているファイルが複数あるという意味ですか？
いろいろ補足にどうぞ。
投稿日時 - 2008-09-15 22:12:31
