Модераторы: korob2001, JackYF, ginnie
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> perl LWP скачать сайт 
:(
    Опции темы
Loki
Дата 19.4.2017, 13:47 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 244
Регистрация: 9.7.2006

Репутация: нет
Всего: нет



Не выходит скачать сайт:
Код

use strict;
use LWP::UserAgent;
use HTTP::Cookies;
use Encode qw(decode encode);




my $site = 'https://www.exploit-db.com/webapps/?order_by=date_published&order=desc&pg=1';
    my $cookie_jar = HTTP::Cookies->new(
     file => 'lwp_cookies.txt',
     autosave => 1,
     ignore_discard => 1,
   );

    my $ua = LWP::UserAgent->new(
        ssl_opts => { verify_hostname => 1 }, 
        cookie_jar => $cookie_jar,
        );
                    #$ua->timeout(10);
                    #$ua->agent('Opera/9.62 (Windows NT 6.0; U; ru) Presto/2.1.1');
    my $response = $ua->get($site);

 if ($response->is_success) {
  my $html = encode("cp866", $response->decoded_content);
    while( $html =~ m/download/ig ) {
    print "download;";
  }
 }
 else {
     die $response->status_line;
 }

Отвкт такой:
Код

403 Forbidden at db.pl line 31.

Куда копать, что делать?
Кукисы складываются.
PM MAIL   Вверх
arto
Дата 19.4.2017, 14:40 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1453
Регистрация: 31.10.2004

Репутация: 37
Всего: 39



user-agent выставить
PM MAIL ICQ   Вверх
Loki
Дата 24.4.2017, 21:05 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 244
Регистрация: 9.7.2006

Репутация: нет
Всего: нет



Выставил, не помогает.
PM MAIL   Вверх
arto
Дата 24.4.2017, 23:05 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1453
Регистрация: 31.10.2004

Репутация: 37
Всего: 39



как сделали?
PM MAIL ICQ   Вверх
alezzz
Дата 25.4.2017, 10:38 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


сплю...
**


Профиль
Группа: Участник
Сообщений: 480
Регистрация: 17.8.2009

Репутация: 1
Всего: 14



Запустил у себя, раскомментировал юзерагент, ssl_opts => { verify_hostname => 1 } выставил в 0 и получил в stdout кучу download;
PM MAIL   Вверх
Google
  Дата 22.10.2017, 01:54 (ссылка)  





  Вверх
  
Ответ в темуСоздание новой темы Создание опроса
Правила форума "Perl"
korob2001
sharq
  • В этом разделе обсуждаются общие вопросы по языку Perl
  • Если ваш вопрос относится к системному программированию, задавайте его здесь
  • Если ваш вопрос относится к CGI программированию, задавайте его здесь
  • Интерпретатор Perl можно скачать здесь ActiveState, O'REILLY, The source for Perl
  • Справочное руководство "Установка perl-модулей", можно скачать здесь


Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, korob2001, sharq.

 
1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Perl: Общие вопросы | Следующая тема »


 




[ Время генерации скрипта: 0.1055 ]   [ Использовано запросов: 21 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.