Ищется программист, для написания нехитрой, дескопной софтины.

Имеются данные в TXT файле в виде

новости Гродно:4841231
подарки для мужчин:35666104
МУЗЫКА ИЗ РЕКЛАМЫ КАРТ НОВАР:3970
сценарий юбилея:2729986
подарки для мужчин:34567
хлорофилл жидкий:177

Для обычных программ для чистки на дубли, строки подарки для мужчин:35666104 и подарки для мужчин:34567, это 2 абсолютно разные строки. Мне нужно чтобы программа понимала что они имеют одинаковые фразы, и оставляла только 1 варант. Корче, на выходе должно выглядеть так

новости Гродно:4841231
подарки для мужчин:35666104
МУЗЫКА ИЗ РЕКЛАМЫ КАРТ НОВАР:3970
сценарий юбилея:2729986
хлорофилл жидкий:177

Размеры файлов большие, от 100мб. Обязательно наличие прогесс бара =)

Пишите в ЛС ваши предложения, и цену.