Antichat снова доступен.
Форум Antichat (Античат) возвращается и снова открыт для пользователей.
Здесь обсуждаются безопасность, программирование, технологии и многое другое.
Сообщество снова собирается вместе.
Новый адрес: forum.antichat.xyz
 |
|

01.09.2009, 17:03
|
|
Banned
Регистрация: 19.06.2006
Сообщений: 1,239
Провел на форуме: 1469161
Репутация:
142
|
|
Удаление дубликатов.
Всем привяу.Нужен скрипт для удаления повторяющихся строк вида string1:string2 из тхт файла.Спасибо.
|
|
|

01.09.2009, 17:04
|
|
Banned
Регистрация: 21.12.2008
Сообщений: 413
Провел на форуме: 4991305
Репутация:
352
|
|
Text Duplicate Killer
|
|
|

01.09.2009, 17:11
|
|
Reservists Of Antichat - Level 6
Регистрация: 25.03.2008
Сообщений: 670
Провел на форуме: 4137635
Репутация:
2407
|
|
Если файл небольшой, то:
PHP код:
<?php
$filename='файл.txt';
$a=file($filename);
$f=fopen($filename,'w');
fputs($f,implode('',array_unique($a)));
fclose($f);
?>
|
|
|

01.09.2009, 17:39
|
|
Новичок
Регистрация: 21.08.2009
Сообщений: 11
Провел на форуме: 17416
Репутация:
13
|
|
Если по unix в консоле
cat filename.txt | sort -u
|
|
|

01.09.2009, 17:42
|
|
Участник форума
Регистрация: 09.03.2009
Сообщений: 131
Провел на форуме: 512070
Репутация:
77
|
|
|
|
|

01.09.2009, 18:47
|
|
Members of Antichat - Level 5
Регистрация: 15.06.2008
Сообщений: 941
Провел на форуме: 5111568
Репутация:
2399
|
|
delete_del.pl <имя файла>
на выходе получим: out_<имя файла>
PHP код:
#!/usr/bin/perl -w
#use: .pl input.txt
$inputF = shift;
$ouputF = 'out_'.$inputF;
open (F , "<$inputF");
@input = <F>;
chomp (@input);
close F;
%out = ();
@input = grep(!$out{$_}++, @input);
open (F , ">>$ouputF");
print F join("\n",@input);
close F;
|
|
|

01.09.2009, 19:30
|
|
Познавший АНТИЧАТ
Регистрация: 01.05.2006
Сообщений: 1,021
Провел на форуме: 3424739
Репутация:
921
|
|
Сообщение от aboutlook
Если по unix в консоле
cat filename.txt | sort -u
или sort -u file.txt >>sorted.txt
|
|
|

01.09.2009, 19:52
|
|
Moderator - Level 7
Регистрация: 12.07.2008
Сообщений: 1,705
Провел на форуме: 5914048
Репутация:
1350
|
|
И для Windows докучи:
get-content text.txt | sort-object -unique | Out-File result.txt
|
|
|

01.09.2009, 19:53
|
|
Постоянный
Регистрация: 24.05.2008
Сообщений: 589
Провел на форуме: 3629857
Репутация:
504
|
|
Сообщение от d_x
Если файл небольшой, то:
PHP код:
<?php
$filename='файл.txt';
$a=file($filename);
$f=fopen($filename,'w');
fputs($f,implode('',array_unique($a)));
fclose($f);
?>
а если файл большой? метров 300 наприимер или 700, и надо удалить все дубликаты?
|
|
|

01.09.2009, 19:55
|
|
Динозавр
Регистрация: 10.01.2008
Сообщений: 2,841
Провел на форуме: 9220514
Репутация:
3338
|
|
То это уже задание для РОА  И еще случайная строка в файле неопределенной длины.
|
|
|
|
 |
|
|
Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
|
|
|
|