вопрос
есть пример:


все работает, все ок

но если списко урлов будет скажем 10к и более скрипт ОЧЕНЬ-ОЧЕНЬ долго думает (функция _start думает)
после чего вылетает с ошибкой типа:
Can't locate Net/DNS/RR/A.pm in @INC (@INC contains: /usr/lib/perl5/site_perl/5.8.6/i386-linux-thread-multi /usr/lib/perl5/site_perl/5.8.5/i386-linux-thread-multi /usr/lib/perl5/site_perl/5.8.4/i386-linux-thread-multi /usr/lib/perl5/site_perl/5.8.3/i386-linux-thread-multi /usr/lib/perl5/site_perl/5.8.6 /usr/lib/perl5/site_perl/5.8.5 /usr/lib/perl5/site_perl/5.8.4 /usr/lib/perl5/site_perl/5.8.3 /usr/lib/perl5/site_perl /usr/lib/perl5/vendor_perl/5.8.6/i386-linux-thread-multi /usr/lib/perl5/vendor_perl/5.8.5/i386-linux-thread-multi /usr/lib/perl5/vendor_perl/5.8.4/i386-linux-thread-multi /usr/lib/perl5/vendor_perl/5.8.3/i386-linux-thread-multi /usr/lib/perl5/vendor_perl/5.8.6 /usr/lib/perl5/vendor_perl/5.8.5 /usr/lib/perl5/vendor_perl/5.8.4 /usr/lib/perl5/vendor_perl/5.8.3 /usr/lib/perl5/vendor_perl /usr/lib/perl5/5.8.6/i386-linux-thread-multi /usr/lib/perl5/5.8.6 .) at (eval 64) line 3.

что за бредятина?

ставлю допустим 500 ссылок, все ок работает (подумаем чуток и работает)

я понимаю, что он думает пока создает очередь запросов, но почему валится при большом кол-ве ссылок?

есть идеи как сделать рабочим при большом кол-ве ссылок, может как-то дозированно выдавать ссылки (в рамках одного запуска)

заранее сенькс

подозреваю что нужно как-то работать с $kernel->yield( $event, @event_args );
НО тогда не могу понять как перехватывать my ( $heap, $request_packet, $response_packet ) = @_[ HEAP, ARG0, ARG1 ];
вот эти два аргумента ARG0, ARG1

$_[ARG0] уже не пашет
$_[0] тоже не пашет

есть идеи?

неужели никто не работал с POE ?

Похоже так. Я вот тут тоже задавал вопрос - и тишина  Доков на русском тоже особенно нет...

а почему бредятина? Что говорит?  Да верно, нет модуля такого-то такого-то 
а конкретно :

К POE нет вопросов  При установке твоего POE::Component::Client::HTTP данный пакетик ставится, но если ручками ставили модули, то могли и забыть. Попробуй обновить модуль... а по мне так просто определённая ссылка попадается , вот может и валится, хотя такого не встречал. 

З.Ы.: Проверил твой код с 1211 ссылками работает 

Уточни - задача твоего скрипта?

Добавлено @ 23:04 
Может подскажу 

ты попробуй поставить например 20.000 ссылок или поболее
валится или нет?
на 1000 ссылках быстро обработал (загнал к себе в память?)

Не валится (13778ссылок), но работает небыстро  я не могу выбрать те ссылки, с которыми коннект замечательный =)
Выложи в инете список с большим количеством ссылок  

проверил скрипт на 

скрипт считает количество ссылок 
Скрипт с твоми кодом "не отвалился"!
Код твой рабочий, но требует оптимизации, не надо провоцировать людей, конкретно спрашивать 
Да - он "загоняет" это всё в ОЗУ (281 504Кб)

видимо косяк в модулях действительно
буду искать =)
сенькс

возник новый вопрос:
для начала сенькс всем кто учавствовал и учавствует в теме, разобрался дело было в модуле

вот есть массив с большим кол-вом ссылок скажем 100к ссылок
можно ли как-то сделать, что бы работало в цикле, а именно типа

foreach my $url (@url)
{
POE::Session->create
(inline_states =>
{_start => sub {$_[KERNEL]->post(ua => request => got_response => GET $url);},
got_response => \&client_handle_response});
}

НО не как работает в данном варианте (ДОЛГО, ОЧЕНЬ ДОЛГО он думает потом начинает работу) а по мере поступления инфы
тобишь получил первую ссылку и погнал ее обрабатывать, в том время как дальше по циклу наполняются остальные
т.е. сразу по мере получения начал отрабатывать

заранее сенькс

есть идеи?

ап

так ты @url из файла наверное наполняешь? так не гони все это в память. в цикле чтения и запускай обработчиков.

Ну что разобрался? Или так и пытаешься все в цикле сделать?

Просто я вот решил изучить POE переписывая свой проксичекер с форков на POE, и выяснил много интересного. А так как строил на тех же примерах, что и у тебя используются, могу подсказать где косяк у тебя 

У меня другая немного проблема, потому как я всеже не по ссылкам лажу, хотя это тоже предстоит, я проверяю один адрес, но через разные прокси, соответственно большую нагрузку могу создать, поэтому ограничиваю свой поток запросов. Но все одно, через некоторое время стабильно 500 ошибка  типа я заддосил этот урл 

А шо воно такоэ?