Модераторы: skyboy, MoLeX, Aliance, ksnk
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> CURL белый экран, CURl результаты появляются не всегда 
:(
    Опции темы
sanitarn
Дата 24.3.2015, 08:52 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Шустрый
*


Профиль
Группа: Участник
Сообщений: 56
Регистрация: 3.10.2014

Репутация: нет
Всего: нет



Всем привет, подскажите, столкнулся с такой ситуацией, хочу получить страницу с помощью курла, обращаюсь к странице один раз и страница открывается, обновляю страницу и у меня белый экран, вопрос почему?

Код

function yandex($url) {
     $ch = curl_init();
        curl_setopt($ch, CURLOPT_URL,$url);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
        curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.0.1) Gecko/2008070208');
        //curl_setopt($ch, CURLOPT_COOKIEJAR, $_SERVER['DOCUMENT_ROOT'].'/my_cookies.txt');
        curl_setopt($ch, CURLOPT_COOKIEFILE, $_SERVER['DOCUMENT_ROOT'].'/my_cookies.txt');
        curl_setopt($ch, CURLOPT_TIMEOUT, 20);
        curl_setopt($ch, CURLOPT_PROXYTYPE, CURLPROXY_HTTP);
        //curl_setopt($ch, CURLOPT_PROXYTYPE, CURLPROXY_SOCKS5);//屫蠑
       // curl_setopt($ch, CURLOPT_PROXY, $proxy);
        $ss=curl_exec($ch);
        curl_close($ch);
        return $ss; 
}

$yandex = yandex("http://yandex.ru/yandsearch?lr=213&s=all&text=url%3Awww.yaca.yandex.ru*%20|%20url%3Ayaca.yandex.ru*");
echo $yandex;

PM MAIL   Вверх
sanitarn
Дата 24.3.2015, 11:20 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Шустрый
*


Профиль
Группа: Участник
Сообщений: 56
Регистрация: 3.10.2014

Репутация: нет
Всего: нет



Сделал вывод curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1); и curl_setopt($ch, CURLOPT_HEADER, 1); и результатом оказался редирект на капчу. Как решается данный вопрос?
И еще при работе с протоколом  https вообще ни заголовка ни редиректа нет, белый экран
PM MAIL   Вверх
Aliance
Дата 24.3.2015, 13:45 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


I ♥ <script>
****


Профиль
Группа: Модератор
Сообщений: 6418
Регистрация: 2.8.2004
Где: spb

Репутация: 14
Всего: 137



Вас Яндекс считает (и справедливо делает) ботом. Если есть большое желание парсить курлом яндекс - то используйте прокси.
PM MAIL WWW ICQ Skype   Вверх
sanitarn
Дата 24.3.2015, 15:06 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Шустрый
*


Профиль
Группа: Участник
Сообщений: 56
Регистрация: 3.10.2014

Репутация: нет
Всего: нет



Цитата(Aliance @  24.3.2015,  13:45 Найти цитируемый пост)
Вас Яндекс считает (и справедливо делает) ботом. Если есть большое желание парсить курлом яндекс - то используйте прокси. 

Ну так в этом и вся засада, как избавится от этого? Подключить антигейт или работать чисто с проксями?
Есть еще способы парсинга яши помимо курла и файлгетконтента?

PM MAIL   Вверх
  
Ответ в темуСоздание новой темы Создание опроса
Правила форума "PHP"
Aliance
IZ@TOP
skyboy
SamDark
MoLeX

Новичкам:

  • PHP редакторы собираются и обсуждаются здесь
  • Электронные книги по PHP, документацию можно найти здесь
  • Интерпретатор PHP, полную документацию можно скачать на PHP.NET

Важно:

  • Не брезгуйте пользоваться тегами [code=php]КОД[/code] для повышения читабельности текста/кода.
  • Перед созданием новой темы воспользуйтесь поиском и загляните в FAQ
  • Действия модераторов можно обсудить здесь

Внимание:

  • Темы "ищу скрипт", "подскажите скрипт" и т.п. будут переноситься в форум "Web-технологии"
  • Темы с именами: "Срочно", "помогите", "не знаю как делать" будут УДАЛЯТЬСЯ

Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, IZ@TOP, skyboy, SamDark, MoLeX, awers.

 
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | PHP: Общие вопросы | Следующая тема »


 




[ Время генерации скрипта: 0.0604 ]   [ Использовано запросов: 22 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.