Еще оди словарь собранный из нескольких десятков маленьких словаре.провел объединение, сортировку, очистку от дублей и очистку от ÖπéïπÇéπüù, а также удалил все пароли меньше 8 символов.

https://yadi.sk/d/90QFIU_7hGsV2

Как бы не так! Там ещё и русские символы есть, и прочее...

Что я сделал не так? Подскажите пожалуйста буду благодарен. и что эта за программа у вас? как называется?

cat 1.lst 2.lst 3.lst | sort | uniq | sed -n '/^.\{8\}/p' > result.txt

sed '/[^\t\n\r -~]/d' 1.txt > ochishen.txt

остались слова короче 8 символов (из-за возврата каретки)

обрабатывай словари сначала этим - tr -d '\r' bezCR.dic

Я сначала очистил бы от мусора, а только потом клеил и сортировал.

Будет гораздо быстрее.

В выделенном какая-то ошибка. У меня удаляет все, кроме символов.

А если так - sed -n '/^.\{9\}/p' - проверил на txt файлах - оставляет 9 знаков и больше

sed -n '/^.\{8\}/p' - соответственно оставляет 8 знаков и >

Программка для очистки словарей от мусора. Писалась только для себя, поэтому возможны недочёты в работе интерфейса. Однако свои обязанности выполняет чётко. Скачать.

P.S. Не рекомендую использовать мой парсер для обработки файлов больше 250 MB.

Спасибо большое за программу))Работает отлично очень быстро все обрабатывает.)

А смысл? Держать в другом словаре 8-значные числа, которые пробиваются отдельным словарём на "раз-два-три"? Кстати, там и так несколько операций есть которые мимоходом удаляют строки короче 8-ми символов.

Да я в начале не разобрался) теперь все хорошо подчистил словари) еще раз спасибо вам