Я решил собрать тематическую базу мыл. Линки собрал парсером, но вот как выдрать оттуда мыльни. Ведь мне нужно чтобы сборщик проходился по всем ссылкам внутри домена, т.к. далеко не всегда мыльники лежат где попало и при этом не перепрыгивал на другие домены. AEE Pro в данной ситуации не спасает. Во-первых он подвисает, а во-вторых не может перелопатить адреса внутридоменно. Кто что посоветует?