VPF::Не получаю страницы при POST запросе

v1kee

Дата 6.1.2011, 01:56 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 19
Регистрация: 14.9.2010

Репутация: нет
Всего: нет

Здравствуйте уважаемые форумчане! Всех с новым годом! smile

Столкнулся с такой проблемой: не получаю содержимого страницы при POST запросе
поиск смотрел при разных вариантах реализации задачи выдает один и тот же результат...
код:

Код


<?php    
        $socket = fsockopen('www.turbobit.net', 80, $errno, $errstr, 30);
        
        if(!$socket)die("$errstr($errno)");
        $data = urlencode("user[login][email protected]&user[pass]=zyvurara&user[submit]=Войти");
        fwrite($socket, "POST /user/login HTTP/1.1\r\n");
        fwrite($socket, "Host: turbobit.net\r\n");
        fwrite($socket,"Content-type: application/x-www-form-urlencoded;\r\n");
        fwrite($socket,"Content-length:".strlen($data)."\r\n");
        fwrite($socket,"Accept:*/*\r\n");
        fwrite($socket,"User-agent:User-agent:chrome 4.0\r\n");
        fwrite($socket,"Connection: close\r\n");
        fwrite($socket,"\r\n");
        fwrite($socket,"{$data}\r\n");
        
        fwrite($socket,"\r\n");         
                
        //теперь читаем и выводим ответ
        $answer = '';
        while(!feof($socket)){
            $answer.= fgets($socket, 4096);
        }
        $answer = mb_convert_encoding($answer, "windows-1251", "UTF-8");
        fclose($socket);
        
        echo $answer;
?>

выдает этот запрос следующее:

Код


HTTP/1.1 302 Found
Date: Wed, 05 Jan 2011 22:51:29 GMT
Content-Type: text/html; charset=UTF-8
Connection: close
Server: Apache/2.2.16 (FreeBSD)
X-Powered-By: PHP/5.2.14
Set-Cookie: kohanasession=eed608326c5643bb110e3c1421197fcf; expires=Thu, 06-Jan-2011 00:51:29 GMT; path=/
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
Set-Cookie: kohanasession=fec0705451caeacfcc0191183358a089793b0399%7Eeed608326c5643bb110e3c1421197fcf; expires=Thu, 06-Jan-2011 00:51:29 GMT; path=/
Set-Cookie: compid=797f94636e3afb97c3c501e0374aeb9af854774d%7E6B0136EE25E3281E82A5FE5546F2EF63; expires=Thu, 05-Jan-2012 22:51:29 GMT; path=/
location: /
Content-Length: 0

при GET запросе на этот сервер он нормально возвращает содержимое страницы а при POST что-то не хочет :(
Помогите пожалуйста в чем может быть дело?

Это сообщение отредактировал(а) v1kee - 6.1.2011, 17:34

skyboy

Дата 6.1.2011, 11:38 (ссылка)

(нет голосов)

Загрузка ...

неОпытный

Профиль
Группа: Модератор
Сообщений: 9820
Регистрация: 18.5.2006
Где: Днепропетровск

Репутация: 1
Всего: 260

ну, запрос принят, обработан и тебе вернули редирект на "корень":

Цитата(v1kee @ 6.1.2011, 00:56

)

HTTP/1.1 302 Found
…
location: /

"обычный клиент"(браузер то есть) как себя ведет при отправке формы?

v1kee

Дата 6.1.2011, 16:15 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 19
Регистрация: 14.9.2010

Репутация: нет
Всего: нет

Вернули редирект - тоесть все как бы успешно? Хм... ну браузер тоже возвращает корень, но в браузере на странице на которую произошел редирект отображается что якобы вы авторизированы: тоесть отображается логин и кнопки "Войти" уже не наблюдается...

v1kee

Дата 6.1.2011, 17:33 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 19
Регистрация: 14.9.2010

Репутация: нет
Всего: нет

Вот что еще заметил:
запрашиваю страницу в браузере и прохожу авторизацию, перехват http заголовков дает следующее:

Код


POST /user/login HTTP/1.1
Host: turbobit.net
Connection: keep-alive
Referer: http://turbobit.net/
Content-Length: 116
Cache-Control: max-age=0
Origin: http://turbobit.net
Content-Type: application/x-www-form-urlencoded
Accept: application/xml,application/xhtml+xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5
User-Agent: Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/534.10 (KHTML, like Gecko) Chrome/8.0.552.224 Safari/534.10
Accept-Encoding: gzip,deflate,sdch
Accept-Language: ru-RU,ru;q=0.8,en-US;q=0.6,en;q=0.4
Accept-Charset: windows-1251,utf-8;q=0.7,*;q=0.3
Cookie: compid=0f7cee7f9e50a90568992ec9380de46dec0741c7%7EF25EA097C07FCFB4E4C558F2BE7B7CE5; __utmz=1.1293809980.1.1.utmcsr=fstud.ru|utmccn=(referral)|utmcmd=referral|utmcct=/programmy/17131-key-checker-201.html; turbobit1=Fri%20Dec%2031%202010%2021%3A39%3A47%20GMT+0600%20%28Local%20Standard%20Time%29; turbobit2=Fri%20Dec%2031%202010%2021%3A44%3A37%20GMT+0600%20%28Local%20Standard%20Time%29; refuid=50f715cb5a2e8a336de34adea0f53ebbfebbed3b%7E375177056ABCB64B423906B5D03CF12D; kohanasession=1520e6ffe14ffd3e514236234389dd29bdd4810b%7E5ebb75f4138402cf2d517a197218827b; __utma=1.592933253.1293809980.1294153644.1294320486.7; __utmc=1; __utmb=1.1.10.1294320486

user%5Blogin%5D=amd12%40mail.ru&user%5Bpass%5D=zyvurara&user%5Bsubmit%5D=%D0%92%D0%BE%D0%B9%D1%82%D0%B8HTTP/1.1 302 Found
Date: Thu, 06 Jan 2011 13:50:14 GMT
Content-Type: text/html; charset=UTF-8
Connection: keep-alive
Server: Apache/2.2.17 (FreeBSD)
X-Powered-By: PHP/5.2.14
Set-Cookie: kohanasession=5ebb75f4138402cf2d517a197218827b; expires=Thu, 06-Jan-2011 15:50:13 GMT; path=/
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
Set-Cookie: kohanasession=1520e6ffe14ffd3e514236234389dd29bdd4810b%7E5ebb75f4138402cf2d517a197218827b; expires=Thu, 06-Jan-2011 15:50:13 GMT; path=/
Set-Cookie: sid=c4f85083f0b3f86a43c70f70c35ebb48c81b56db%7E6f8c4c28a9c8cb260e5c61aec744c1a7; expires=Fri, 07-Jan-2011 13:51:53 GMT; path=/
location: http://turbobit.net/
Content-Length: 0

GET / HTTP/1.1
Host: turbobit.net
Connection: keep-alive
Referer: http://turbobit.net/
Cache-Control: max-age=0
Accept: application/xml,application/xhtml+xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5
User-Agent: Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/534.10 (KHTML, like Gecko) Chrome/8.0.552.224 Safari/534.10
Accept-Encoding: gzip,deflate,sdch
Accept-Language: ru-RU,ru;q=0.8,en-US;q=0.6,en;q=0.4
Accept-Charset: windows-1251,utf-8;q=0.7,*;q=0.3
Cookie: compid=0f7cee7f9e50a90568992ec9380de46dec0741c7%7EF25EA097C07FCFB4E4C558F2BE7B7CE5; __utmz=1.1293809980.1.1.utmcsr=fstud.ru|utmccn=(referral)|utmcmd=referral|utmcct=/programmy/17131-key-checker-201.html; turbobit1=Fri%20Dec%2031%202010%2021%3A39%3A47%20GMT+0600%20%28Local%20Standard%20Time%29; turbobit2=Fri%20Dec%2031%202010%2021%3A44%3A37%20GMT+0600%20%28Local%20Standard%20Time%29; refuid=50f715cb5a2e8a336de34adea0f53ebbfebbed3b%7E375177056ABCB64B423906B5D03CF12D; __utma=1.592933253.1293809980.1294153644.1294320486.7; __utmc=1; __utmb=1.1.10.1294320486; kohanasession=1520e6ffe14ffd3e514236234389dd29bdd4810b%7E5ebb75f4138402cf2d517a197218827b; sid=c4f85083f0b3f86a43c70f70c35ebb48c81b56db%7E6f8c4c28a9c8cb260e5c61aec744c1a7

HTTP/1.1 200 OK
Date: Thu, 06 Jan 2011 13:50:14 GMT
Content-Type: text/html; charset=UTF-8
Transfer-Encoding: chunked
Connection: keep-alive
Server: Apache/2.2.16 (FreeBSD)
X-Powered-By: PHP/5.2.14
Set-Cookie: kohanasession=5ebb75f4138402cf2d517a197218827b; expires=Thu, 06-Jan-2011 15:50:14 GMT; path=/
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
Set-Cookie: kohanasession=1520e6ffe14ffd3e514236234389dd29bdd4810b%7E5ebb75f4138402cf2d517a197218827b; expires=Thu, 06-Jan-2011 15:50:14 GMT; path=/
Content-Encoding: gzip

У меня в запросе Connection: close
а тут Connection: keep-alive
поменял у себя на keep-alive, долго грузится и потом выдает что превышено время ожидания запроса... smile

Это сообщение отредактировал(а) v1kee - 6.1.2011, 17:36

patap

Дата 6.1.2011, 18:22 (ссылка)

(нет голосов)

Загрузка ...

Опытный

Профиль
Группа: Участник
Сообщений: 893
Регистрация: 7.5.2005
Где: Украина, Зп

Репутация: нет
Всего: 40

Тебе, должно быть, нужно отсылать на сервер правильную куку.

1. когда мы незалогинены и заходим на www.turbobit.net, то в браузере устанавливаются следующие куки, которые присылает сервер:
compid :        5138e434dd4bfc6bdb5a898a045949392473c481%7E4301B9575A38783AD07EAB3764188936
kohanasession : 1443fb6f001fd2232f7ebf66dd736c44cd19eb59%7E97856ca692b95cbcce3a0711b49dda33

2. когда мы отсылаем запрос на авторизацию, клиент отсылает на сервер эти две куки(что видно из заголовков)
kohanasession=  1443fb6f001fd2232f7ebf66dd736c44cd19eb59%7E97856ca692b95cbcce3a0711b49dda33;
compid=         5138e434dd4bfc6bdb5a898a045949392473c481%7E4301B9575A38783AD07EAB3764188936;

3. получаем ответ с сервера:
  а) если авторизация прошла удачно, на клиент приходит такая кука
  sid=            06124cedccaebed83f3f019ba228e25972840c17%7Efa668aecd1fef52a30a37dd5cf11b1d1;

  б) если неудачно, разумется этой куки нет

4. после того как мы авторизировались, клиент в заголовках отсылает куку sid. Т.е во всех авторизированных запросах учавствуют следующие куки
compid :        5138e434dd4bfc6bdb5a898a045949392473c481%7E4301B9575A38783AD07EAB3764188936
kohanasession : 1443fb6f001fd2232f7ebf66dd736c44cd19eb59%7E97856ca692b95cbcce3a0711b49dda33
sid :           06124cedccaebed83f3f019ba228e25972840c17%7Efa668aecd1fef52a30a37dd5cf11b1d1

соответственно когда пытаешься получить страницу, не отослав на сервер куку - сервер считает тебя незалогиненным, и воозвращает код где есть форма для логина

Это сообщение отредактировал(а) patap - 6.1.2011, 18:28

--------------------

На боку кобура болталась, сзади шашка отцовская звякала.
Впереди меня все хохотало, а позади все плакало (с)

v1kee

Дата 6.1.2011, 19:42 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 19
Регистрация: 14.9.2010

Репутация: нет
Всего: нет

Цитата(patap @ 6.1.2011, 18:22

)

Тебе, должно быть, нужно отсылать на сервер правильную куку.

Блин мужик слушай, да ты прав кажется.... спасибо smile

, буду щас думать как составить правильный header smile

v1kee

Дата 6.1.2011, 23:09 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 19
Регистрация: 14.9.2010

Репутация: нет
Всего: нет

Да patap направление хода мыслей ты правильное указал, отсылаю в заголовке куки полученные в первом запросе, но теперь не могу разобраться с Connection: Keep-Alive, TE
когда стоит Connection: Close, TE идет попытка отослать POST запрос, а когда keep-Alive получаю исключение:

Код


Fatal error: Maximum execution time of 30 seconds exceeded

дело в том что посылаю заголовки перехваченные сниффером при авторизации в браузере, а там последовательность приема/передачи такая:

Код


запрос

GET / HTTP/1.1
User-Agent: Opera/9.80 (Windows NT 6.1; U; ru) Presto/2.7.62 Version/11.00
Host: turbobit.net
Accept: text/html, application/xml;q=0.9, application/xhtml+xml, image/png, image/jpeg, image/gif, image/x-xbitmap, */*;q=0.1
Accept-Language: ru,en;q=0.9,ru-RU;q=0.8
Accept-Charset: iso-8859-1, utf-8, utf-16, *;q=0.1
Accept-Encoding: deflate, gzip, x-gzip, identity, *;q=0
Referer: http://turbobit.net/
Cache-Control: no-cache
Connection: Keep-Alive, TE
TE: deflate, gzip, chunked, identity, trailers

ответ

HTTP/1.1 200 OK
Date: Thu, 06 Jan 2011 16:34:53 GMT
Content-Type: text/html; charset=UTF-8
Transfer-Encoding: chunked
Connection: keep-alive
Server: Apache/2.2.17 (FreeBSD)
X-Powered-By: PHP/5.2.14
Set-Cookie: kohanasession=d16c772b0926afd04a85670629dae3e6; expires=Thu, 06-Jan-2011 18:34:52 GMT; path=/
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
Set-Cookie: kohanasession=90bbb2d52293a13a913072d4f094b069f62fb7bb%7Ed16c772b0926afd04a85670629dae3e6; expires=Thu, 06-Jan-2011 18:34:52 GMT; path=/
Set-Cookie: compid=bebabc553195346efb17889e123617d3f47dced5%7E0C3027455A6243D06C391D20EB2B7D04; expires=Fri, 06-Jan-2012 16:34:52 GMT; path=/
Content-Encoding: gzip

запрос

POST /user/login HTTP/1.1
User-Agent: Opera/9.80 (Windows NT 6.1; U; ru) Presto/2.7.62 Version/11.00
Host: turbobit.net
Accept: text/html, application/xml;q=0.9, application/xhtml+xml, image/png, image/jpeg, image/gif, image/x-xbitmap, */*;q=0.1
Accept-Language: ru,en;q=0.9,ru-RU;q=0.8
Accept-Charset: iso-8859-1, utf-8, utf-16, *;q=0.1
Accept-Encoding: deflate, gzip, x-gzip, identity, *;q=0
Referer: http://turbobit.net/
Cookie: kohanasession=90bbb2d52293a13a913072d4f094b069f62fb7bb%7Ed16c772b0926afd04a85670629dae3e6; compid=bebabc553195346efb17889e123617d3f47dced5%7E0C3027455A6243D06C391D20EB2B7D04; __utmz=1.1294331720.1.1.utmcsr=(direct)|utmccn=(direct)|utmcmd=(none); __utma=1.557309744.1294331720.1294331720.1294331720.1; __utmc=1; __utmb=1.1.10.1294331720
Cookie2: $Version=1
Connection: Keep-Alive, TE
TE: deflate, gzip, chunked, identity, trailers
Content-Length: 103
Content-Type: application/x-www-form-urlencoded

user%5Blogin%5D=amd12%40mail.ru&user%5Bpass%5D=zyvurara&user%5Bsubmit%5D=%D0%92%D0%BE%D0%B9%D1%82%D0%B8

ответ

Date: Thu, 06 Jan 2011 16:38:19 GMT
Content-Type: text/html; charset=UTF-8
Connection: keep-alive
Server: Apache/2.2.17 (FreeBSD)
X-Powered-By: PHP/5.2.14
Set-Cookie: kohanasession=d16c772b0926afd04a85670629dae3e6; expires=Thu, 06-Jan-2011 18:38:18 GMT; path=/
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
Set-Cookie: kohanasession=90bbb2d52293a13a913072d4f094b069f62fb7bb%7Ed16c772b0926afd04a85670629dae3e6; expires=Thu, 06-Jan-2011 18:38:18 GMT; path=/
Set-Cookie: sid=e85747a9fa5aa21f529d1d6a5386810f80e5fd80%7Ee73fa90fbc2472e68ffdcc9a687693f2; expires=Fri, 07-Jan-2011 16:39:58 GMT; path=/
location: http://turbobit.net/
Content-Length: 0

везде в заголовке устанавливается команда держать соединение (keep-alive) что я и не могу с эмулировать smile

patap

Дата 8.1.2011, 17:41 (ссылка)

(нет голосов)

Загрузка ...

Опытный

Профиль
Группа: Участник
Сообщений: 893
Регистрация: 7.5.2005
Где: Украина, Зп

Репутация: нет
Всего: 40

вот, я тут на досуге набросал чуток, будут вопросы - спрашивай

Код


<?php
//  header('Content-Type: text/html; charset=utf-8');
  $url = "http://www.turbobit.net";
  
  $ch = curl_init();  
  // первый заход на сайт, получаем куки
  curl_setopt($ch, CURLOPT_URL, $url);
  curl_setopt($ch, CURLOPT_HEADER, 1);
  curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
  curl_setopt($ch, CURLOPT_TIMEOUT, 3);
  curl_setopt($ch, CURLOPT_POST, 0);
  $result = curl_exec($ch);

  preg_match_all('#Set-Cookie: (.*?;)#', $result, $match);
  
  // логинимся
  curl_setopt($ch, CURLOPT_URL, $url . '/user/login');
  curl_setopt($ch, CURLOPT_HEADER, 1);
  curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
  curl_setopt($ch, CURLOPT_TIMEOUT, 3);
  curl_setopt($ch, CURLOPT_POST, 1);
  curl_setopt($ch, CURLOPT_POSTFIELDS, 'user[login][email protected]&user[pass]=qwerty');
  curl_setopt($ch, CURLOPT_HTTPHEADER, array(
    'User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.2.8) Gecko/20100722 MRA 5.7 (build 03796) Firefox/3.6.8',
    'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
    'Accept-Language: ru,en-us;q=0.7,en;q=0.3',
    'Accept-Encoding: gzip,deflate',
    'Accept-Charset: windows-1251,utf-8;q=0.7,*;q=0.7',
    'Keep-Alive: 115',
    'Connection: keep-alive',
    'Referer: http://turbobit.net/'
  ));
  curl_setopt($ch, CURLOPT_COOKIE, $match[1][1] . $match[1][2]);
  $result = curl_exec($ch);  
  
  preg_match_all('#Set-Cookie: (.*?;)#', $result, $match); // в match - находятся кукисы
  
  // просмотр страниц для зареганого юзера
  curl_setopt($ch, CURLOPT_URL, $url . '/user/settings');
  curl_setopt($ch, CURLOPT_HEADER, 1);
  curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
  curl_setopt($ch, CURLOPT_TIMEOUT, 3);
  curl_setopt($ch, CURLOPT_POST, 0);
  curl_setopt($ch, CURLOPT_HTTPHEADER, array(
    'User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.2.8) Gecko/20100722 MRA 5.7 (build 03796) Firefox/3.6.8',
    'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
    'Accept-Language: ru,en-us;q=0.7,en;q=0.3',
    'Accept-Encoding: gzip,deflate',
    'Accept-Charset: windows-1251,utf-8;q=0.7,*;q=0.7',
    'Keep-Alive: 115',
    'Connection: keep-alive',
    'Referer: http://turbobit.net/'
  ));
  curl_setopt($ch, CURLOPT_COOKIE, $match[1][2] . $match[1][4] . $match[1][6]);
  $result = curl_exec($ch);  
  
  curl_close($ch);
  
  echo $result;
?>

--------------------

На боку кобура болталась, сзади шашка отцовская звякала.
Впереди меня все хохотало, а позади все плакало (с)

v1kee

Дата 9.1.2011, 10:27 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 19
Регистрация: 14.9.2010

Репутация: нет
Всего: нет

patap, Спасибо тебе огромное добрый человек! smile

Блин хотел плюсик тебе поставить да постов у меня недостаточно :( В общем огромное спасибо еще раз!

patap

Дата 9.1.2011, 11:33 (ссылка)

(нет голосов)

Загрузка ...

Опытный

Профиль
Группа: Участник
Сообщений: 893
Регистрация: 7.5.2005
Где: Украина, Зп

Репутация: нет
Всего: 40

v1kee, да то ничего smile

я получил удовольствие, когда получил куку sid=... ))

--------------------

На боку кобура болталась, сзади шашка отцовская звякала.
Впереди меня все хохотало, а позади все плакало (с)

v1kee

Дата 9.1.2011, 12:33 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 19
Регистрация: 14.9.2010

Репутация: нет
Всего: нет

Мир нуждается в таких как ты patap! я вот в 4 часа ночи просыпаюсь и пока пару строчек кода не напишу не попробую реализовать какуюнить мысль, спать не могу.... до 6 промучаюсь smile

нифига не получается дальше спать иду... smile

А ты бац и такой элегантный а главное рабочий код выдал. smile

Спасибо еще раз, тему можно закрывать smile

0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема \| PHP: Сеть \| Следующая тема »