|
Модераторы: Aliance, skyboy, MoLeX, ksnk |
|
studentigor |
|
||||
Опытный Профиль Группа: Участник Сообщений: 397 Регистрация: 14.11.2008 Репутация: нет Всего: нет |
Всем привет.
В общем есть сайт с объявлениями, он написан на asp. Мне нужно спарсить объявления, предварительно авторизировавшись. Сразу скажу, на локалке все работает отлично. Сама авторизация происходит в 3 этапа. followlocation не использую по этому для редиректе делаю ещё 1 дополнительный гет запрос. Первый запрос, гет, я со страници с формой авторизации беру токен. 1й - Отправка формы авторизации(1 пост + 1гет для редиректа). 2й - соглашение какое-то(1 пост + 1гет для редиректа). 3й - смена языка(1 пост, гет запрос делаю уже когда начинаю парсить обьявы). А вот у клиента на его сервере - както кривовато. В чем это видно. Все может упасть либо на сомом первом гет запросе, а может дойти и до последнего пост запроса(смена языка). Вот метод для авторизации
Метод getFormToken, делает обычный гет запрос(он же редирект), и из полученного контента возращает просто значения необходимых полей(текена).
И вот я уже не знаю на что грешить, вроде как и курл работает, и хостинг не режет(доходит же до последнего пост запроса). Но в итоге: Ошибка cURL 7: couldn't connect to host. У меня такое бывало на локалке - но то у меня интернет отваливался. Запустил на сервере и на локалке одновременно, в итоге на локалке парсит, а на сервере - ошибка. Подскажите плиз, в чем может быть ошибка. Спасибо. Это сообщение отредактировал(а) studentigor - 27.7.2013, 13:42 |
||||
|
|||||
studentigor |
|
|||
Опытный Профиль Группа: Участник Сообщений: 397 Регистрация: 14.11.2008 Репутация: нет Всего: нет |
В общем, проблемма на клиенском хостинге так и не решилась адекватными методами.
Единственное решение, над которым не пришлось долго думать, это зациклить execute. Сделал так: Установыил число итераций, и когда делаю проверку результата, то в случае если его нет, вызываю себя же рекурсивно. Ну и само сабой, добавил счетчик итераций. Если даже через несколько попыток соединится не удалось - возвращаю пустой html(заглушку). Так получилось обойти эту проблемму, хотя и через костыль |
|||
|
||||
lumentek |
|
|||
Бывалый Профиль Группа: Участник Сообщений: 180 Регистрация: 19.11.2009 Репутация: нет Всего: нет |
Было подобное с одним сервисом. Он банил подсети крупных хостинг провадеров. Прокси в курсе спасло.
|
|||
|
||||
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей) | |
0 Пользователей: | |
« Предыдущая тема | PHP: Сеть | Следующая тема » |
|
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности Powered by Invision Power Board(R) 1.3 © 2003 IPS, Inc. |