VPF::Помогите URLConnection скачать страницу целиком ?

pptck

Дата 1.7.2011, 14:48 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 3
Регистрация: 17.10.2007

Репутация: нет
Всего: нет

При получении сераницы

Код


            URLConnection con=new URL (urlsrc).openConnection();
            con.setRequestProperty("Authorization","basic "+ encodedUserPass);
            con.setUseCaches(false);
            con.setDoInput(true);
            con.setDoOutput(true);
            con.connect();
            ist=new Source(con.getInputStream());

в теле получаю
identified you are using an old browser . We recommend you upgrade to the most recent version
и не все данные присутствуют

Можно ли, получить страницу целиком как в браузере, "Сохранить страницу полностью"?

Либо можно ли на сокетах при одной авторизации получать разные страницы? При URLConnection каждое обрашение фиксируется как авторизация.

Это сообщение отредактировал(а) pptck - 1.7.2011, 14:50

LSD

Дата 1.7.2011, 15:42 (ссылка)

(нет голосов)

Загрузка ...

Leprechaun Software Developer

Профиль
Группа: Модератор
Сообщений: 15718
Регистрация: 24.3.2004
Где: Dublin

Репутация: 19
Всего: 538

1. Не стесняемся использовать кнопу Код.

2. Чтобы не получать identified you are using an old browser . We recommend you upgrade to the most recent version, надо исправить User-Agent на ID какого нибудь современного браузера.

Код


con.setRequestProperty("User-Agent", "*****");

User-Agent для современных браузеров можно найти в гугле smile

--------------------

Disclaimer: this post contains explicit depictions of personal opinion. So, if it sounds sarcastic, don't take it seriously. If it sounds dangerous, do not try this at home or at all. And if it offends you, just don't read it.

pptck

Дата 4.7.2011, 15:51 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 3
Регистрация: 17.10.2007

Репутация: нет
Всего: нет

LSD,

Спасибо, но установка User-Agent на полноту данных не влияет

при скачивании URlConnection в теле есть <td align="center" nowrap="1" id="LAASMUL3Mtimeonly2"></td>

при скачивании браузером <td align="center" nowrap="1" id="LAASMUL3Mtimeonly2">13:15</td>

LSD

Дата 4.7.2011, 17:21 (ссылка)

(нет голосов)

Загрузка ...

Leprechaun Software Developer

Профиль
Группа: Модератор
Сообщений: 15718
Регистрация: 24.3.2004
Где: Dublin

Репутация: 19
Всего: 538

1. После установки User-Agent сообщение identified you are using an old browser . We recommend you upgrade to the most recent version исчезло?

2. Cравни HTTP заголовки которые шлет браузер и твоя программа. Посмотреть, что шлет браузер и что шлет твоя программа можно с помощью Charles.

--------------------

pptck

Дата 5.7.2011, 16:28 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 3
Регистрация: 17.10.2007

Репутация: нет
Всего: нет

1. Нет сообщение не исчезло

2.В страници данные подгружаются дополнительно.
Идет Get***/Date.asp?UI=логин&****
"Refer" ,"страница которую качаю первоначально"

Переделал съем данных с других мест, более громозтко, но работает.

Спасибо

1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема \| Java: Работа с сетью \| Следующая тема »