Как самому собирать базы каталогов.
 

Вопрос наверное глупый, но ответа не нашел.
Какой прогой можно собрать собственную базу каталогов/гостевух. Искал в поиски нашел только сборщик баз мыл. И людей которые продают базы каталогов, а вот через чего можно собрать самому так и не нашел.

хххх, мне бы тоже хотелось узнать :)

самыйй простой способ юзаешь поисковик ключевые слова каталоги потом добавляеешь эти ссылки в базу Allsubmitter потом когда насобирал экспортируешь базу и вылаживаешь тут
самый просто способ, но долгий

В allsubmitter есть функция добавить с SE. Там вводишь запросы типа inurl:addsite.php
inurl:submit.php ну и т.д. жмешь старт и она автоматом собирает базу.

Спасибо большое, сейчас сижу разбираюсь. Пока что не понял как в аллсубмитере сделать так что бы он больше 1000 ссылок мог собрать, и как задать глубину поиска. Но в целом все понятно.

Больше 1000 ты не соберешь, это ограничение поисковиков.

А что после 1000 происходит? бан по ip?
если да то на какое время =)

Ограничение в 1000 результатов поиска. Тоесть больше 1000 линков за проход по всей выдаче получить нельзя.

Бан можно получить за слишком частые запросы (т.е. за парсинг)

Наверное глупый вопрос, а вот если я по одному и тому же запросу
Пройду пару раз т.е с одними и теме же запросами, у меня будут только первые 1000 ссылок или каждый раз будут разные ссылки собираться. Я что то вот этого не понимаю.

еще добавляй -intitle:error