PDA

Просмотр полной версии : [mail.ru] Friends Parser 1.04


ZeaL
04.05.2011, 16:00
[mail.ru] Friends Parser 1.03

***OLD THREAD***

Парсер списка друзей с проекта "мой мир"

Автор программы: ZeaL

-не требует прокси

-работает через m.mail.ru

-требует валидный аккаунт для подключения

-по желанию парсим список "друзья-друзей"

-многопоточность(только в приват версии)

-ожидание между новым Get запросом - 5 секунд, (покупайте приват версию)

да, я такой злой что поставил таймаут между запросами парсера

http://www.datafilehost.com/download-ae154f50.html

http://i005.radikal.ru/1105/cd/ab5fcfa3b5a5.jpg

qwertyeb
09.05.2011, 07:17
Проверял кто-нибудь?

megageorge
09.05.2011, 09:28
Да... Пашет отлично.

Автору респект +

Кста, сколько будет стоить многопоток?

daradan
10.05.2011, 22:25
обясните плиз какую сылку написать на parsefrom

megageorge
11.05.2011, 02:11
daradan said:
обясните плиз какую сылку написать на parsefrom


Адрес страницы человека, друзей которого парсим

Копипастишь из адресной строки в браузере

Что то типа

http://my.mail.ru/mail/my_account/#page=/mail/lina59.03/

ZeaL
13.05.2011, 15:34
megageorge, многопоточная версия стоит 50р, icq#: 646459042

daradan, функции использующиеся для парсинга адреса понимают строки вида:

address@domain.ru (стандартный вид адреса)

/domain/user (вид адреса из URL ссылки, обычно это my.mail.ru/mail/username)

to all, данная версия содержит код от Friends Parser 1.03, и GUI от Friends Parser 1.04, в старом коде не использовались куки, за счет чего каждый запрос проходит в два прохода:

-авторизация

-редирект на друзей

+так же по неизвестным причинам, на Friends Parser 1.03 при парсинге "друзья-друзей", если более 2000 адресов, то парсер останавливался на отметке 2000-2010..., в FP 1.04 таково не наблюдается, скорее из-за использования куки, при 10 потоках список из ~6700 адресов, спарсился за ~1 минуту, при скорость ~60kb/s

+ко всему прочему в паблик версии я вшил пятисекундный таймаут

daradan
13.05.2011, 16:39
спс автору, пропарсил сперва своих друзей а потом ихних друзей и получилось 19604 мыл