Antichat снова доступен.
Форум Antichat (Античат) возвращается и снова открыт для пользователей.
Здесь обсуждаются безопасность, программирование, технологии и многое другое.
Сообщество снова собирается вместе.
Новый адрес: forum.antichat.xyz
 |

10.11.2008, 09:15
|
|
Banned
Регистрация: 14.04.2007
Сообщений: 297
Провел на форуме: 756152
Репутация:
38
|
|
Умные парсеры
Вообщем хочу написать парсер на php , которыйпарсит загруженную страницу вот по такому вот алгоритму:
1. найти в тексте все имена людей и
записать их в файл отдельно
2. найти в тексте все глаголы (Past simple tense) и также записать их в файл отдельно..
Вопрос: Это вообще реально ли?
Можно ли это как то будет ускорить?
|
|
|

10.11.2008, 10:12
|
|
Флудер
Регистрация: 21.06.2006
Сообщений: 3,193
Провел на форуме: 12702287
Репутация:
4738
|
|
Сообщение от MafiaBoy3
Вообщем хочу написать парсер на php , которыйпарсит загруженную страницу вот по такому вот алгоритму:
1. найти в тексте все имена людей и
записать их в файл отдельно
2. найти в тексте все глаголы (Past simple tense) и также записать их в файл отдельно..
Вопрос: Это вообще реально ли?
Можно ли это как то будет ускорить?
Реально, если есть словарь глаголов и отдельно имён.
Если без словарей, анализировать где глагог, а где имя каким образом будешь? Попахивает лингвистическим анализатором, сам ты его сходу точно быстро не напишешь...
|
|
|

10.11.2008, 11:12
|
|
Banned
Регистрация: 14.04.2007
Сообщений: 297
Провел на форуме: 756152
Репутация:
38
|
|
спасибо а если этих самых имён и глаголов более 10.000 тыс. стоит ли?
И какова будет скорость?
|
|
|

10.11.2008, 11:21
|
|
Флудер
Регистрация: 21.06.2006
Сообщений: 3,193
Провел на форуме: 12702287
Репутация:
4738
|
|
Сообщение от MafiaBoy3
спасибо а если этих самых имён и глаголов более 10.000 тыс. стоит ли?
И какова будет скорость?
Не знаю, но если заюзаешь регулярки, имхо, должно относительно быстро получиться...
|
|
|

10.11.2008, 11:34
|
|
Banned
Регистрация: 14.04.2007
Сообщений: 297
Провел на форуме: 756152
Репутация:
38
|
|
а как мне можно приучить паука чтобы он мог копировать страницы вконтакте в базу данных?
Вконтакте ведь запаролен
|
|
|

10.11.2008, 11:40
|
|
Познавший АНТИЧАТ
Регистрация: 01.06.2008
Сообщений: 1,047
Провел на форуме: 5321514
Репутация:
3313
|
|
в http запрос добавляй cookiesы контакта.
Используй curl/zend_http_client, т.к с ними проще работать.
Последний раз редактировалось ChaaK; 10.11.2008 в 11:44..
|
|
|

10.11.2008, 11:49
|
|
Banned
Регистрация: 14.04.2007
Сообщений: 297
Провел на форуме: 756152
Репутация:
38
|
|
ChaaK
Где можно почиать на русском так чтобы выучить ра и навсегда про curl/zend_http_client?
|
|
|

10.11.2008, 11:55
|
|
Познавший АНТИЧАТ
Регистрация: 01.06.2008
Сообщений: 1,047
Провел на форуме: 5321514
Репутация:
3313
|
|
Google.com -> работа с curl site  hpclub.ru
Не могу дать прямой ссылки, т.к сижу с тела
|
|
|
|
 |
Похожие темы
|
| Тема |
Автор |
Раздел |
Ответов |
Последнее сообщение |
|
Парсеры (php)
|
Sov1et |
Разное - Покупка, продажа, обмен |
5 |
24.08.2008 14:51 |
|
Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
|
|
|
|