Antichat снова доступен.
Форум Antichat (Античат) возвращается и снова открыт для пользователей.
Здесь обсуждаются безопасность, программирование, технологии и многое другое.
Сообщество снова собирается вместе.
Новый адрес: forum.antichat.xyz
 |
Aura SE Parser / Лучший парсер поисковиков |

13.02.2008, 07:06
|
|
Постоянный
Регистрация: 15.03.2006
Сообщений: 600
Провел на форуме: 5091304
Репутация:
1203
|
|
Aura SE Parser / Лучший парсер поисковиков
Для тех кто не в курсе что это:
- парсинг результатов выдачи Google, Yahoo, Live, возможность установки глубины просматриваемых страниц. количество результатов на странице для всех поисковых систем - 100.
- многопоточность - произвольное число потоков на SE, отдельные списки запросов для каждой SE, параллельный парсинг нескольких SE, возможность установки таймаута потока
- прокси - HTTP, установка таймаута соединения, возможность парсинга без прокси
- вращение выдачи - буквы, цифры, дополнительные запросы, ALD (Any Level Domain, подстановка конструкции site:домен_любого_уровня в запросы Google)
- принудительная задержка потоков (для парсинга без прокси)
- postmortem-механизм - продолжение парсинга после ребута/выключения сервера
- развернутая статистика - процент выполнения потоков, парсинга в целом, время парсинга
- скачивание выдачи поисковых систем в gzip
- макроподстановки в запросах
- очистка мусора из выдачи
- фильтрация результатов
Требования к хосту:
- UNIX-подобная операционная система
- Perl 5.8.6 и выше, есть в поставке подавляющего большинства UNIX-подобных систем
- Perl-модули: Byteloader, Compress::Zlib, Uncompress::Gunzip, CGI, CGI::Carp, POSIX, Fcntl, LWP::UserAgent
(как вы видите, бесплатные - отпадают)
Архив содержит отличный мануал, по установке и настройке. не вижу смысла его здесь копипастить.
Скачать пароль antichat
+
Пак апдейтов
+
Мод для Yahoo
Конкретный скрипт я заводил. Большинство возможных проблем, из-за отсутствия модулей перла
|
|
|

03.03.2008, 01:36
|
|
Познающий
Регистрация: 22.08.2007
Сообщений: 40
Провел на форуме: 316647
Репутация:
20
|
|
хост должен быть dedicated?
|
|
|

03.03.2008, 03:12
|
|
Постоянный
Регистрация: 15.03.2006
Сообщений: 600
Провел на форуме: 5091304
Репутация:
1203
|
|
ДА нет, почему, и Vps и даже хостинг пойдет, тут по мощности смотри сам, главное конфигурация
|
|
|

07.06.2008, 00:57
|
|
Познавший АНТИЧАТ
Регистрация: 18.06.2005
Сообщений: 1,004
Провел на форуме: 2821162
Репутация:
1320
|
|
Это какая версия?
|
|
|

07.06.2008, 04:12
|
|
Banned
Регистрация: 06.10.2006
Сообщений: 288
Провел на форуме: 2741921
Репутация:
469
|
|
Сообщение от fuckthesystem
хост должен быть dedicated?
Чем мощнее тем лучше ибо эта херь жрет дохуя ресов.
P.S. Спам зло.
|
|
|

10.08.2008, 09:54
|
|
Banned
Регистрация: 03.08.2005
Сообщений: 430
Провел на форуме: 639191
Репутация:
60
|
|
а на win xp можноже апаче натсроить и под win32 запускать не обязательно из unix?
Мод для Yahoo - можно перезалить ?
|
|
|

10.08.2008, 11:09
|
|
Постоянный
Регистрация: 10.06.2007
Сообщений: 476
Провел на форуме: 924649
Репутация:
299
|
|
Ты читать умеешь?
Unix нужен!
|
|
|
|
 |
|
Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
|
|
|
|