Вот этой пользуюсь на линухе (perl)

http://files.mail.ru/UNWNSE

здесь в файл sites добавляешь сайты

а в result собираешь результаты

базу можешь сам добавлять