PDA

Просмотр полной версии : обзор программ удаляющиx дубликаты строк


Vanterlog
11.07.2009, 22:52
Решил сделать обзор программ удаляющиx дубликаты строк. Также желающие могут продолжить даный список.

bvsDupDelet
v. 0.2.4.24
автор: TorBel

http://vizbe.net.ru/img/bvsDupDelet.PNG

Описание:
Программа создаёт файл на основе исходного путём сортировки строк исходного файла и удаления дубликатов строк с учётом регистра, лидирующих и замыкающих пробелов и/или символов табуляции.
При нажатии кнопки Stay on top - программа всегда будет отображаться поверх всех окон.

Скачать (http://vizbe.net.ru/bvsDupDelet.zip)

Duplicat Remover by Teso
v. 1.3.0.0
автор: Teso

http://s44.radikal.ru/i103/0905/fa/5bd979250a24.jpg

Описание:

Удаление дублей
Разбивка
Сортировка
Единовременная обработка более чем одного файла
Поддержка Drag and Drop - "перетаскивание"
Поддерживает параметры командной строки (можно указать список файлов которые при запуске будут обработаны или выделить пачку файлов и перетащить на иконку с приложением)
С кириллицей не работает

Скачать (http://multi-up.com/98227)

Fast Duplicates Remover
v0.1
автор: M0nty

http://s54.radikal.ru/i146/0905/3f/411b903aa7a2.jpg

Описание:
Консольная программа.
1-ый способ: перетаскиваем файл в консольное окно и удаляем кавычки из пути к файлу. Жмём Enter.
2-ой способ: закидываем файл в папку с программой и пишем название файла (обязательно вместе с форматом файла) в консольном окне. Жмём Enter.
На выходе получаем файл Out.txt

Скачать (http://multi-up.com/98231)

naRedup
автор: .avolver

http://s53.radikal.ru/i142/0905/f3/67aaa8ae2874.jpg

Описание:
Плюсы:

быстрая работа
удобное GUI
сортировка выходного файла по алфавиту
добавление файлов Drag&Drop'ом - "перетаскивание"

Минусы:

сортировку не отключить
добавленный файл не убрать из списка на обработку
вылет при попытке выйти из программы, во время работы
программа не работает с бинарными файлами

Virustotal: click (http://www.virustotal.com/ru/analisis/a665bfbb9a5e6d65b32007a1d7112aa5)
Скачать (http://multi-up.com/98234)

DupKill
v. 0.2.4.24
автор: SPYDER

http://i036.radikal.ru/0905/26/8ce9fd9be8ec.jpg

Описание:
Удаляет повторы строк в текстовом файле, в то же время сортирует список по алфавиту. Также есть функция удалить повторы и оригиналом.

Скачать (http://multi-up.com/98239)

DicTool
v. 1.1
автор: astako

http://grabberz.com/downloads/dictool_6u3.png

Описание:
Основные функции программы - это работа со словарями, но она также удаляет дубликаты.


Обрезать слова до указанной длины
Слово в нижний регистр (abcd)
Слово в верхний регистр (ABCD)
Первая буква слова в верхний регистр (A***)
Первая буква слова в нижний регистр (a***)
Чередовать регистры (AbCd, aBcD)
Удаление дубликатов без сортировки.


Скачать (http://multi-up.com/95071)

Для удаление дубликатов прокси можно также использовать FP4m (http://www.proxy-base.org/proxy-soft/66-find-proxies-me-udobnyi-parser-proksi.html) от NemeZz

http://s59.radikal.ru/i166/0809/cd/000f9524a38e.jpg

ПРОДОЛЖЕНИЕ В 10 ПОСТЕ.

ТАКЖЕ ПРОЗЬБА МОДЕРАТОРАМ ОБЪЕДИНИТЬ 1 И 10 ПОСТ

Alexandr II
11.07.2009, 22:56
вроде норма)) лови +

KATYA
11.07.2009, 23:10
Спасибо! Как раз это я и искала!

B1ack$un
12.07.2009, 15:28
Для коллекции :)
DoubleDel
http://i036.radikal.ru/0907/73/c31ef1f7f87d.jpg
Скачать (http://rapidshare.com/files/254905198/DoubleDel.rar.html)

Scripter
12.07.2009, 15:42
http://slil.ru/27830130

GeneratoR Pro
http://s40.radikal.ru/i089/0906/fc/546fbc034dca.jpg

Возможности:
Генерирование по диапазону с одним или несколькими паролями.
Генерирование из файла с одним или несколькими паролями.

Имеются такие функции:
- Cортировка
- Clonekiller (удаление повторов)
- Spacekiller (удаление пробелов)
http://i017.radikal.ru/0906/a6/5e6392677c88.jpg
http://s59.radikal.ru/i165/0906/42/7a1a71a3d213.jpg
- Удаление Y из X;Y при любом разделителе
- Обмен местами X;Y на Y;X
- Быстрая замена

! Работа как в окне программы, так и с .txt файлом

hide_
12.07.2009, 15:51
Решил сделать обзор программ удаляющиx дубликаты строк.
красава (http://www.proxy-base.org/f50/programmy_udalyayuschie_dublikaty_strok-646.html)

Scripter
12.07.2009, 15:54
Решил сделать обзор программ удаляющиx дубликаты строк.

Решил скопировать обзор программ удаляющих дубликаты строк

B1ack$un
12.07.2009, 15:58
Решил скопировать обзор программ удаляющих дубликаты строк
мда...дело пахнет плагиатом

.Varius
12.07.2009, 18:11
"Чужие статьи"

Vanterlog
12.07.2009, 20:08
Text Duplicate Killer

http://www.rusdocs.com/wp-content/uploads/2008/05/text-duplicate-killer.gif

Описание:
Text Duplicate Killer - программа, предназначенная для удаления из текста повторяющихся строк (не обязательно смежных). В результате создается новый текстовый файл, в котором каждая строка встречается только один раз.

Как найти дубликаты


У Вас должен быть готов файл формата ASCII, содержащий текст, в котором Вы хотите удалить дублирующиеся строки. Если Вам нужно обработать текст из файлов DOC или RTF, то экспортируйте его в ASCII.
После запуска утилиты tdk.exe выберите пункт меню Файл|Открыть исходный файл и укажите файл, в котором необходимо удалить дубликаты.
Затем с помощью пункта меню Файл|Задать целевой файл укажите имя нового файла. В этот файл утилита поместит обработанный текст, который уже не будет содержать дубликатов. Вы можете автоматически создать новое имя. Для этого нажмите кнопку с “волшебной палочкой”.
Для запуска процесса поиска и удаления дубликатов выберите пункт меню Операции|Убрать дубликаты!. В любой момент Вы можете прервать работу, нажав на кнопку Стоп, находящуюся в правом нижнем углу. При большом объеме текста обработка может занять некоторое время.


Скачать ( http://www.softforfree.com/files/soft/tdk.zip)

Fata1ex
12.07.2009, 20:13
Где копирайты? Не стыдно писать "решил сделать обзор" когда обзор не твой? Да и зачем этот обзор, когда программы в основном отличаются друг от друга лишь дизайном. Обзоры пишутся, чтобы указать различия, преимущества, недостатки программ, сходных по выполняемым функциям...

Freesty1er
22.05.2010, 00:13
Целый день ищу, не могу найти :(

Нужна программа, для удаления дубликатов, но что бы пустые строки оставались (на месте дубликатов). Никто не подскажет такую?

Заранее благодарен.

POS_troi
22.05.2010, 08:24
notepad++

!TNK!
22.05.2010, 10:39
Вот норм Программка пользуюсь сам

http://kfvbyfn.ucoz.ru/avto.jpg

Автоформат – программа для автоматического форматирования текста и подсчёта статистики
Меню Сервис:
Обрезать пробелы – обрезать пробелы и табуляцию в началах и концах строк
Удалить двойные пробелы – удалить двойные, тройные и т.д. пробелы по всему тексту
Удалить пустые строки – пустые строки удаляются по всему тексту
Удалить дубли – удаляются полные дубликаты строк. Проверьте, если в началах и концах строк лишние пробелы
Удалить уникальные – удаляются только уникальные строки, дубли остаются. Каждого дубликата остаётся на один меньше. Чтобы оставить их по одному, выберите Удалить дубли
Сортировать – текст сортируется по возрастанию
Сортировать зеркальные – сортируется по возрастанию текст зеркальных строк
Перемешать – текст перемешивается - каждая строка меняется со случайной местами

---------------------
Сайт Автора (http://www.motorocker.ru/soft-avtoformat.htm)
скачать L1 (http://kfvbyfn.ucoz.ru/load/0-0-0-52-20)
L 2 (http://www.motorocker.ru/download/autoformat.zip)

Freesty1er
22.05.2010, 12:13
!TNK!, спасибо! То что доктор прописал ;)