![]() |
|
Модераторы: MetalFan |
![]()
|
|
| hawkins |
|
|||
|
Шустрый ![]() Профиль Группа: Участник Сообщений: 148 Регистрация: 8.9.2003 Репутация: нет Всего: нет |
Делаю парсинг сайта. Сначала скачиваю страницу используя HTTPSendRequest,
потом вписываю текст страницы в IHTMLDocument2 и начинаю парсить. Проблема в том что когда загружаю текст IE начинает закачивать файлы по ссылкам из страницы. Можно ли как-то запретить это делать, а то это увеличивает время парсинга и трафик. процедура парсинга:
|
|||
|
||||
| MetalFan |
|
|||
![]() Аццкий Сотона ![]() ![]() ![]() ![]() Профиль Группа: Комодератор Сообщений: 3815 Регистрация: 2.10.2006 Где: Moscow Репутация: 3 Всего: 128 |
ни разу не замечал такого с парсером html'я откуда такое утверждение??? Это сообщение отредактировал(а) MetalFan - 28.2.2008, 12:59 -------------------- There are always someone smarter than you... |
|||
|
||||
| hawkins |
|
|||
|
Шустрый ![]() Профиль Группа: Участник Сообщений: 148 Регистрация: 8.9.2003 Репутация: нет Всего: нет |
Проверял сниффером HTTPAnalyzer.
Получается что пакетов которые отправляет прога больше тех которые я посылаю httpSendRequest. Но сниффер показывает что время этих лишних запросов либо равно 0(точнее там ничего непоказано), либо очень маленькое 0,031 s, как буд-то из кэша загружются. Таких запросов два и тип содержимого image/jpeg. Но в любом случае можно пренебречь временем этих запросов, так что я с самого начала ступил когда хотел оптимизировать время парсинга за счет этих запросов. |
|||
|
||||
![]()
|
| Правила форума "Delphi: ActiveX/СОМ/CORBA" | |
|
|
Запрещено: 1. Публиковать ссылки на вскрытые компоненты 2. Обсуждать взлом компонентов и делиться вскрытыми компонентами
Если Вам помогли, и атмосфера форума Вам понравилась, то заходите к нам чаще! С уважением, Rrader, Girder. |
| 0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей) | |
| 0 Пользователей: | |
| « Предыдущая тема | Delphi: ActiveX/СОМ/CORBA | Следующая тема » |
|
|
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности Powered by Invision Power Board(R) 1.3 © 2003 IPS, Inc. |