удаляет одинаковые строки в файле:
$ perl -ne 'print unless $a{$_}++' test.txt > result.txt

Разбиваем предложения в тексте на строки (в Scite):
Find \.
Replace .\n