スーパー重複チェッカーは独自ロジックにて高速に重複チェックを行い重複行を削除してテキストファイルで保存するフリーソフト(無料アプリケーション)です。巨大なファイルも扱えてファイルを開く→重複チェック→ファイルを保存までの作業を高速に行います。ビジネスツールの一つとしてお使い下さい。
http://www.gnzrs.com/spchoufuku/