ANTICHAT.XYZ    VIDEO.ANTICHAT.XYZ    НОВЫЕ СООБЩЕНИЯ    ФОРУМ  
Баннер 1   Баннер 2
Antichat снова доступен.
Форум Antichat (Античат) возвращается и снова открыт для пользователей. Здесь обсуждаются безопасность, программирование, технологии и многое другое. Сообщество снова собирается вместе.
Новый адрес: forum.antichat.xyz
Вернуться   Форум АНТИЧАТ > Оффтоп > Болталка
   
Ответ
 
Опции темы Поиск в этой теме Опции просмотра

Ищу скрипты - спайдеры
  #1  
Старый 21.09.2006, 12:55
Аватар для Algol
Algol
Регистрация: 29.05.2002
Сообщений: 1,793
Провел на форуме:
2050916

Репутация: 0


По умолчанию Ищу скрипты - спайдеры

Ищу скрипты для создания поисковой машины. Необходим спайдер для сканирования web-сайтов инета (НЕ одного сайта).
Язык - любой (в т.ч. Perl и C) - под юникс.
Если кто нить где-то встречал подобные (возможно и платные) скрипты - просьба отписать.
 
Ответить с цитированием

  #2  
Старый 21.09.2006, 13:27
Аватар для censored!
censored!
Green member - Level 3
Регистрация: 02.11.2004
Сообщений: 1,337
Провел на форуме:
2398258

Репутация: 648


По умолчанию

Может ковырнуть: http://company.yandex.ru/technology/products/yandex-server.xml
__________________
+ (это не крестик, это плюсик!)
__________________


 
Ответить с цитированием

  #3  
Старый 22.09.2006, 02:40
Аватар для Algol
Algol
Регистрация: 29.05.2002
Сообщений: 1,793
Провел на форуме:
2050916

Репутация: 0


По умолчанию

Цитата:
Сообщение от censored!  
Может ковырнуть: http://company.yandex.ru/technology/products/yandex-server.xml
Нет, ковырять не нужно
 
Ответить с цитированием

  #4  
Старый 22.09.2006, 10:50
Аватар для madnet
madnet
Умиротворенн
Регистрация: 09.12.2004
Сообщений: 996
Провел на форуме:
2386719

Репутация: 1384


Отправить сообщение для madnet с помощью ICQ
По умолчанию

Гляень MnoGoSearch отличная софтина, под никсы бесплатная. Сам на ней сижу.

Все удобно кладется в БД. Работает со всеми типами БД. можно организовать как поиск по сайту так и по сети.

Выводить можно из БД встроеными средствами своим скриптом либо использовать php api после установки модуля. Вообщем замечательная штука, особенно учитывая ее цену.

Система - http://www.mnogosearch.org/
Неплохой ман - http://linux.yaroslavl.ru/docs/conf/mnogosearch/index-ru.html
__________________

http://madnet.name - madnet - blog | homepage (Мысли, релизы, скрипты, софт)

http://antichat.ru - Лучший сайт по безопасности
irc.antichat.ru:7771 #antichat - общение online
ГАРАНТ ФОРУМА

Последний раз редактировалось madnet; 22.09.2006 в 11:03..
 
Ответить с цитированием

  #5  
Старый 22.09.2006, 10:58
Аватар для Егорыч+++
Егорыч+++
Administrator
Регистрация: 27.05.2002
Сообщений: 1,241
Провел на форуме:
20377164

Репутация: 0


По умолчанию

http://www.cs.ioc.ee/~ando/sphider/

А вообще тут много всего

http://www.hotscripts.com/PHP/Scripts_and_Programs/Search_Engines/index.html
 
Ответить с цитированием

  #6  
Старый 22.09.2006, 11:18
Аватар для Algol
Algol
Регистрация: 29.05.2002
Сообщений: 1,793
Провел на форуме:
2050916

Репутация: 0


По умолчанию

Цитата:
Сообщение от madnet  
Гляень MnoGoSearch отличная софтина, под никсы бесплатная. Сам на ней сижу.

Все удобно кладется в БД. Работает со всеми типами БД. можно организовать как поиск по сайту так и по сети.

Выводить можно из БД встроеными средствами своим скриптом либо использовать php api после установки модуля. Вообщем замечательная штука, особенно учитывая ее цену.

Система - http://www.mnogosearch.org/
Неплохой ман - http://linux.yaroslavl.ru/docs/conf/mnogosearch/index-ru.html
Да, это я находил, смотрел описание. Но по-моему она ориентированна на индексирование одного сайта. Кроме того, серьезные инет-поисковики на БД не сидят, это крайне неэффективно.
 
Ответить с цитированием

  #7  
Старый 22.09.2006, 13:14
Аватар для madnet
madnet
Умиротворенн
Регистрация: 09.12.2004
Сообщений: 996
Провел на форуме:
2386719

Репутация: 1384


Отправить сообщение для madnet с помощью ICQ
По умолчанию

>Да, это я находил, смотрел описание. Но по-моему она ориентированна на >индексирование одного сайта. Кроме того, серьезные инет-поисковики на БД не сидят, это крайне неэффективно.

Нет какразтаки она ориентировано на вариацию, тоесть ты можеш выбрать мультиДБ и работать со множеством сайтов, конечно до поисковика типа Гугла она не дотянет я не спорю.

По поводу БД трудно сказать, не нравится БД бери сурс и меняй на что хочеш!
__________________

http://madnet.name - madnet - blog | homepage (Мысли, релизы, скрипты, софт)

http://antichat.ru - Лучший сайт по безопасности
irc.antichat.ru:7771 #antichat - общение online
ГАРАНТ ФОРУМА
 
Ответить с цитированием

  #8  
Старый 22.09.2006, 20:04
Аватар для [hidden]
[hidden]
Участник форума
Регистрация: 05.11.2005
Сообщений: 103
Провел на форуме:
425441

Репутация: 31
По умолчанию

[OFFTOP]
Algol, а как же иначе хранить данные по проиндексированным сайтам, как не в БД?
[/OFFTOP]
 
Ответить с цитированием

  #9  
Старый 23.09.2006, 01:50
Аватар для bul.666
bul.666
Banned
Регистрация: 06.06.2006
Сообщений: 944
Провел на форуме:
3986705

Репутация: 1403


Отправить сообщение для bul.666 с помощью ICQ
По умолчанию

Впринципе сожно и на файлах...
 
Ответить с цитированием

  #10  
Старый 25.10.2006, 14:34
Аватар для madnet
madnet
Умиротворенн
Регистрация: 09.12.2004
Сообщений: 996
Провел на форуме:
2386719

Репутация: 1384


Отправить сообщение для madnet с помощью ICQ
По умолчанию

Algol, напиши plz чем закончились твои поиски!
__________________

http://madnet.name - madnet - blog | homepage (Мысли, релизы, скрипты, софт)

http://antichat.ru - Лучший сайт по безопасности
irc.antichat.ru:7771 #antichat - общение online
ГАРАНТ ФОРУМА
 
Ответить с цитированием
Ответ



Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
не работают скрипты zeppe1in PHP, PERL, MySQL, JavaScript 6 19.08.2006 20:48
Какие скрипты баннерных сетей вы знаете? rsha1988 PHP, PERL, MySQL, JavaScript 0 19.09.2005 19:05
Скрипты Чаты 20 21.08.2002 20:31



Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
 


Быстрый переход




ANTICHAT.XYZ