Antichat снова доступен.
Форум Antichat (Античат) возвращается и снова открыт для пользователей.
Здесь обсуждаются безопасность, программирование, технологии и многое другое.
Сообщество снова собирается вместе.
Новый адрес: forum.antichat.xyz
 |
|

21.09.2006, 12:55
|
Регистрация: 29.05.2002
Сообщений: 1,793
Провел на форуме: 2050916
Репутация:
0
|
|
Ищу скрипты - спайдеры
Ищу скрипты для создания поисковой машины. Необходим спайдер для сканирования web-сайтов инета (НЕ одного сайта).
Язык - любой (в т.ч. Perl и C) - под юникс.
Если кто нить где-то встречал подобные (возможно и платные) скрипты - просьба отписать.
|
|
|

21.09.2006, 13:27
|
|
Green member - Level 3
Регистрация: 02.11.2004
Сообщений: 1,337
Провел на форуме: 2398258
Репутация:
648
|
|
Может ковырнуть: http://company.yandex.ru/technology/products/yandex-server.xml
__________________
+ (это не крестик, это плюсик!)
__________________
•
•
•
|
|
|

22.09.2006, 02:40
|
Регистрация: 29.05.2002
Сообщений: 1,793
Провел на форуме: 2050916
Репутация:
0
|
|
Сообщение от censored!
Может ковырнуть: http://company.yandex.ru/technology/products/yandex-server.xml
Нет, ковырять не нужно 
|
|
|

22.09.2006, 10:50
|
|
Умиротворенн
Регистрация: 09.12.2004
Сообщений: 996
Провел на форуме: 2386719
Репутация:
1384
|
|
Гляень MnoGoSearch отличная софтина, под никсы бесплатная. Сам на ней сижу.
Все удобно кладется в БД. Работает со всеми типами БД. можно организовать как поиск по сайту так и по сети.
Выводить можно из БД встроеными средствами своим скриптом либо использовать php api после установки модуля. Вообщем замечательная штука, особенно учитывая ее цену.
Система - http://www.mnogosearch.org/
Неплохой ман - http://linux.yaroslavl.ru/docs/conf/mnogosearch/index-ru.html
__________________
http://madnet.name - madnet - blog | homepage (Мысли, релизы, скрипты, софт)
http://antichat.ru - Лучший сайт по безопасности
irc.antichat.ru:7771 #antichat - общение online
ГАРАНТ ФОРУМА
Последний раз редактировалось madnet; 22.09.2006 в 11:03..
|
|
|

22.09.2006, 10:58
|
|
Administrator
Регистрация: 27.05.2002
Сообщений: 1,241
Провел на форуме: 20377164
Репутация:
0
|
|
http://www.cs.ioc.ee/~ando/sphider/
А вообще тут много всего
http://www.hotscripts.com/PHP/Scripts_and_Programs/Search_Engines/index.html
|
|
|

22.09.2006, 11:18
|
Регистрация: 29.05.2002
Сообщений: 1,793
Провел на форуме: 2050916
Репутация:
0
|
|
Сообщение от madnet
Гляень MnoGoSearch отличная софтина, под никсы бесплатная. Сам на ней сижу.
Все удобно кладется в БД. Работает со всеми типами БД. можно организовать как поиск по сайту так и по сети.
Выводить можно из БД встроеными средствами своим скриптом либо использовать php api после установки модуля. Вообщем замечательная штука, особенно учитывая ее цену.
Система - http://www.mnogosearch.org/
Неплохой ман - http://linux.yaroslavl.ru/docs/conf/mnogosearch/index-ru.html
Да, это я находил, смотрел описание. Но по-моему она ориентированна на индексирование одного сайта. Кроме того, серьезные инет-поисковики на БД не сидят, это крайне неэффективно.
|
|
|

22.09.2006, 13:14
|
|
Умиротворенн
Регистрация: 09.12.2004
Сообщений: 996
Провел на форуме: 2386719
Репутация:
1384
|
|
>Да, это я находил, смотрел описание. Но по-моему она ориентированна на >индексирование одного сайта. Кроме того, серьезные инет-поисковики на БД не сидят, это крайне неэффективно.
Нет какразтаки она ориентировано на вариацию, тоесть ты можеш выбрать мультиДБ и работать со множеством сайтов, конечно до поисковика типа Гугла она не дотянет я не спорю.
По поводу БД трудно сказать, не нравится БД бери сурс и меняй на что хочеш!
__________________
http://madnet.name - madnet - blog | homepage (Мысли, релизы, скрипты, софт)
http://antichat.ru - Лучший сайт по безопасности
irc.antichat.ru:7771 #antichat - общение online
ГАРАНТ ФОРУМА
|
|
|

22.09.2006, 20:04
|
|
Участник форума
Регистрация: 05.11.2005
Сообщений: 103
Провел на форуме: 425441
Репутация:
31
|
|
[OFFTOP]
Algol, а как же иначе хранить данные по проиндексированным сайтам, как не в БД?
[/OFFTOP]
|
|
|

23.09.2006, 01:50
|
|
Banned
Регистрация: 06.06.2006
Сообщений: 944
Провел на форуме: 3986705
Репутация:
1403
|
|
Впринципе сожно и на файлах...
|
|
|

25.10.2006, 14:34
|
|
Умиротворенн
Регистрация: 09.12.2004
Сообщений: 996
Провел на форуме: 2386719
Репутация:
1384
|
|
Algol, напиши plz чем закончились твои поиски!
__________________
http://madnet.name - madnet - blog | homepage (Мысли, релизы, скрипты, софт)
http://antichat.ru - Лучший сайт по безопасности
irc.antichat.ru:7771 #antichat - общение online
ГАРАНТ ФОРУМА
|
|
|
|
 |
|
|
Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
|
|
|
|