Ну вот у меня заготовки есть
http://myorb.site88.net/crawler.zip

Но использовать этот скрипт нельзя. Тк он основан на рекурсии. Писал просто года 2 назад. особым интелектом тогда не выделялся
Ну для ознакомления хватит.