Написал программу для очистки словарей.

Программа консольная, собрана для Windows x32/64, Linux x32/64 и MacOS x64

Ключ для справки -h

Функции:

1. Удаление слов, содержащих non-printable символы. Автоматически.

2. Удаление слов по длине. По умолчанию 8-63. Можно задать необходимый диапазон с помощью ключей -min и -max.

3. Поиск дубликатов. По умолчанию отключен. Включить ключ -d.

4. Сортировка. Автоматически.

5. Подсчет слов в словаре. Отдельная функция, ключ -c.

Возможны два варианта использования, по одному файлу или всех файлов в каталоге с программой.

В автоматическом режиме программа по умолчанию ищет все файлы с расширение .dic, можно задать необходимое, ключ -ext.

Примеры использования:

wordlistcleaner.exe -min 8 -max 63 -d -src Source.dic -new New.dic

wordlistcleaner.exe -a

wordlistcleaner.exe -a -d

wordlistcleaner.exe -a -ext txt

wordlistcleaner.exe -c Source.dic

wordlistcleaner_win_x32.7z

wordlistcleaner_win_x64.7z

wordlistcleaner_linux_x32.7z

wordlistcleaner_linux_x64.7z

wordlistcleaner_darwin_x64.7z

Кому интересно, пробуем, пишем отзывы

UPD новая версия >> тут