ANTICHAT — форум по информационной безопасности, OSINT и технологиям
ANTICHAT — русскоязычное сообщество по безопасности, OSINT и программированию.
Форум ранее работал на доменах antichat.ru, antichat.com и antichat.club,
и теперь снова доступен на новом адресе —
forum.antichat.xyz.
Форум восстановлен и продолжает развитие: доступны архивные темы, добавляются новые обсуждения и материалы.
⚠️ Старые аккаунты восстановить невозможно — необходимо зарегистрироваться заново.
 |
21.05.2019, 13:04
|
|
Новичок
Регистрация: 27.01.2019
Сообщений: 3
Провел на форуме:
979
Репутация:
0
|
|
Пример того что мне нужно:
1. Есть файл тхт 1
2. Есть файл тхт 2
3. Нужно соединить их вместе и проверить на дубликат
4. На выходе иметь строки которые тхт1 не содержит то есть без дубликатов "уникальные строки"
|
|
|
21.05.2019, 13:17
|
|
Постоянный
Регистрация: 23.09.2018
Сообщений: 465
Провел на форуме:
93221
Репутация:
12
|
|
|
|
|
|
21.05.2019, 13:35
|
|
Новичок
Регистрация: 27.01.2019
Сообщений: 3
Провел на форуме:
979
Репутация:
0
|
|
а конкретно не скажешь какой софт мне может помочь в моей проблеме?
|
|
|
|
21.05.2019, 13:36
|
|
Флудер
Регистрация: 19.06.2015
Сообщений: 4,126
Провел на форуме:
759330
Репутация:
147
|
|
Сообщение от Demonolog
↑
а конкретно не скажешь какой софт мне может помочь в моей проблеме?
см. в ПМ
|
|
|
|
21.05.2019, 14:29
|
|
Новичок
Регистрация: 27.01.2019
Сообщений: 3
Провел на форуме:
979
Репутация:
0
|
|
Всем спасибо за помощь, помог с ответом на мой вопрос @ms13 |
|
|
|
21.05.2019, 15:48
|
|
Новичок
Регистрация: 29.01.2019
Сообщений: 15
Провел на форуме:
3102
Репутация:
1
|
|
Дико извиняюсь, а можно и мне в личку инфу скинуть? Буду признателен.
|
|
|
|
21.05.2019, 17:00
|
|
Флудер
Регистрация: 19.06.2015
Сообщений: 4,126
Провел на форуме:
759330
Репутация:
147
|
|
Сообщение от Simonoff
↑
Дико извиняюсь, а можно и мне в личку инфу скинуть? Буду признателен.
Например, тут, да и вообще в данной теме можно найти почти всё по интересующему Вас вопросу.
Просто используйте форумный сёрч.
|
|
|
|
06.10.2019, 14:59
|
|
Новичок
Регистрация: 12.04.2012
Сообщений: 27
Провел на форуме:
9491
Репутация:
1
|
|
с помощью excel , openoffice
|
|
|
|
06.10.2019, 16:09
|
|
Постоянный
Регистрация: 05.12.2004
Сообщений: 647
Провел на форуме:
1698585
Репутация:
818
|
|
cat file1 file2 | sort -u
так в линуксе
|
|
|
|
07.10.2019, 03:15
|
|
Постоянный
Регистрация: 12.05.2015
Сообщений: 974
Провел на форуме:
176859
Репутация:
12
|
|
Сообщение от Demonolog
↑
Пример того что мне нужно:
1. Есть файл тхт 1
2. Есть файл тхт 2
3. Нужно соединить их вместе и проверить на дубликат
4. На выходе иметь строки которые тхт1 не содержит то есть без дубликатов "уникальные строки"
Удаляет дубли любого размера, не портит формат
очень быстро.
Качаем, разархивируем, создаем файл remove_dubles с расширением .bat
В файле пишем:
Код:
App.Merge.exe o="rez_out.txt" t=4 "rez.txt"
pause
rez.txt - файл, в котором мы хотим удалить дубликаты.
rez_out.txt - файл, который мы получим в итоге.
Софт с батником я залил, для тех кто в танке батник открывается любым блокнотом: скачать
Да и не забудьте положить файлы в эту же папку.
Софт может объединять сразу несколько файлов и после удалять дубли, для этого просто вписываем нужные нам файлы:
Код:
App.Merge.exe o="rez_out.txt" t=4 "rez.txt" "rez2.txt" "rez3.txt"
pause
rez.txt - файл, в котором мы хотим удалить дубликаты.
rez2.txt - 2-й файл, в котором мы хотим удалить дубликаты.
rez3.txt - 3-й файл, в котором мы хотим удалить дубликаты.
rez_out.txt - общий файл, который мы получим в итоге.
Также можно прописать различные опции:
o=[out-file] - Выходной файл.
t=[threads] - Потоки, используется для ускорения сортировки вверх только.
c=[mem] - Используется для управления, сколько оперативной памяти для использования в МБ. По умолчанию 1024. блокированного в 3072.
min=[num] - Минимальная длина слова. По умолчанию = 1
max=[num] - Максимальная длина слова. По умолчанию = 4096.
Формат команды:
App.Merge.exe o="output-file.txt" t=4 [options] ... "word-list1.txt" "word-list2.lst" "directory1" ...
Для анализа отчета словесного списка:
App.Merge.exe r = "словарь-list1.txt"
Двойные кавычки необходимы для имени пути / файлов, которые содержат пробелы. Можно также указать пути к каталогам, если вы хотите объединить / сортировать множество файлов в папках.
https://yadi.sk/d/LHSo-TQLLPQxqw
|
|
|
|
|
|
|
Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
|
|
|
|
Линейный вид
