» Поиск одинаковых слов и фраз в тексте

Скажите пожалуйста, если кто знает, существуют проги с финкцией поиска одинаковых слов в и идентичных фраз в тексте с последующими над ними операциями?
Есть текстовый файл с предложениями, по одному в каждой строке. Нужно найти дубликаты этих предложений и удалить.

Цитата:

финкцией поиска одинаковых слов в и идентичных фраз в тексте с последующими над ними операциями?

в теме текстовых редакторов не глядели?
http://forum.ru-board.com/topic.cgi?forum=5&topic=0602#1
+
http://forum.ru-board.com/forum.cgi?action=filter&forum=5&filterby=topictitle&word=%F0%E5%E4%E0%EA%F2
некоторые имеют такие функции (нет времени просматривать все)