чем такое реализовать? может есть модуль

нужно просто как бы зайти на страницу ботом, и чтобы бот "прочитал" (или "просто увидел") Javascript

не нашел, где-то видел что google  смотрит JS...


Это сообщение отредактировал(а) gcc - 26.4.2008, 23:21

Эм.. а в чем проблема? Получаете страницу, парсите как вам удобно, выуживаете JS из него.

ну я написал: что нужно зайти на страницу и чтобы бод увидел JS и нажимать никуда не надо!!!  тем самым когда бот зайдет, JS скрипт должен выполнить кое-что...

когда вы заходиьте на страницу со своего браузера и когда там выполняеться JS код автоматически вы же ничего не клацаете и не парсите!!??

или как сделать? например wget не видет JS, ну так как на perl?


Я понятно выражаюсь, или что не понятно?



захожу с браузера:
я захожу на тсраницу и там віполняеться JS

захожу с wget или с LWP::UserAgent :
JS не выполняеться



как сделать чтобы выполнялся? 

или всетаки нужно пасить?

Нет, вы выражаетесь не понятно, но я кажется все равно догадался. Надо было сразу написать, что что вы хотите выполнить JS средствами Perl, а не то, что "скрипт должен увидеть JS".
Посмотрите, думаю поможет.


Это сообщение отредактировал(а) KSURi - 27.4.2008, 12:42

gcc, или изучите данный скрипт, если сможете, думаю получится и разобраться что он делает, переделать это в perl.

а что там должно было выполнится? редирект? 

не совсем понял 

Как правило после запроса бота, идет ответ - разметка страницы вместе с выполненными js-скриптами. Можно ли выполнять их еще раз, да из зачем это нужно??

Уже выполнение js скриптов идет на серваке?

Насколько я помню из своего опыта написания ботов, бывали случаи когда приходилось что-то выполнять(генерить) средствами перла, то что делалось на странице через js и отправлять это. Как правило при пост-запросе. В случае с гет же, при запросе страницы разметка содержащая некоторые функции js, приходит с уже выполненными js-функциями и сценариями. Т.е. при работе с ботом, пришедшую разметку можно открыть в браузере, серьезных различий не будет. 

Эээ... смысл фразы в том, что при GET запросе JS выполняется на сервере? Надеюсь я не понял смысл)
JavaScript - это client-side технология и соответственно выполняется только на стороне клиента. При запросе и сохранении страницы в файл, если JS был внедрен непосредственно в разметку, вы не заметите разницы. Если же JS был вынесен в отдельный файл, то разницу вы заметите (за исключением случая, когда в ссылке на скрипт прописан абсолютный URL, тогда браузер подгрузит файл перед рендерингом и выполнит его).

Даже модули вроде JavaScript.pm скорее всего не позволят выполнять полноценный JS на стороне сервера, т.к. не реализуют (сам не проверял, но скорее всего так и есть) DOM.

gcc, можно что-нибудь изобрести с WWW::Mechanize и WWW::Mechanize::Plugin::JavaScript. Где-то в англоязычном сегменте сети было что-то похожее на ваши требования.
KSURi, вроде реализуют DOM(модуль HTML::DOM и производные) JavaScript::SpiderMonkey и JE, но в любом случае все это добро будет работать не очень.

Как вариант решения задачи использовать ПО для автоматических тестов (что-то на подобие SAMIE, Selenium) и модули к нему на Perl'e соответственно. Или модули для взаимодействия с браузерами.

Это сообщение отредактировал(а) PanamOS - 28.4.2008, 20:56

Я не спорю. Но после того, как вы отправите http-запрос, а главное получив ответ, вы автоматически становитесь клиентом. 

Это да, просто мне показалось, что вы имели ввиду что, что в контенте, который вы получите от сервера _уже_ будет результат выполнения JS, хотя выполнится он во время рендеринга страницы.

Давно не занимался написанием ботов, но может содержать, а может и нет. Тут ведь все зависит не только от наличия самой js, но и от того, что она выполняет. 

Добавлено через 49 секунд
Если быть совсем точным, бывает что данные и так на виду, в контенте, без выполнения самой js-функции 

Нет, не может. Интерпретатор JS - это браузер. Сервер высылает только исходный код, а браузер его выполняет.