VPF::Чтение страницы. - Форум программистов

Likurgius

Дата 28.10.2006, 22:25 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 39
Регистрация: 20.8.2005

Репутация: нет
Всего: нет

Здраствуйте. Написал код программы, для чтения содержимого страницы, но вот проблема, с одних страниц читает(например: http://www.starwave.com/people/noughton), с других нет(вроде как со всех остальных smile

).
вот код:

Код


import java.io.*;
import java.net.*;
import javax.swing.*;
import java.awt.event.*;

public class AlbumChecker {
    public static void main(String args[]) throws Exception {
        FileOutputStream fw = new FileOutputStream("C:/webpage.txt");
        AlbumChecker obj = new AlbumChecker();

        obj.downloadPage("http://www.starwave.com/people/noughton", fw);
        fw.close();
    }

    public void downloadPage(String Url, OutputStream out) throws Exception {
        URL url = new URL(Url);
        HttpURLConnection conn = (HttpURLConnection) url.openConnection();
        conn .setRequestProperty("user-agent", "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; FunWebProducts; .NET CLR 1.1.4322)");
        conn.setRequestMethod("GET");
        int len = conn.getContentLength();
        if (len > 0) {
            InputStream input = conn.getInputStream();
            int read;
            byte[] buffer = new byte[16384];
            while ((read = input.read(buffer)) != -1)
                out.write(buffer, 0, read);
            input.close();
            out.flush();
        } else {
            System.out.println("No content");
        }
    }
}

Буду благодарен за помощь. LSD надеюсь на тебя, ибо предложенный код для чтения программы написан тобой smile

Это сообщение отредактировал(а) Likurgius - 28.10.2006, 22:29

LSD

Дата 28.10.2006, 22:36 (ссылка)

(нет голосов)

Загрузка ...

Leprechaun Software Developer

Профиль
Группа: Модератор
Сообщений: 15718
Регистрация: 24.3.2004
Где: Dublin

Репутация: 19
Всего: 538

А с каких страниц он не грузит? И что при этом пишет?

--------------------

Disclaimer: this post contains explicit depictions of personal opinion. So, if it sounds sarcastic, don't take it seriously. If it sounds dangerous, do not try this at home or at all. And if it offends you, just don't read it.

Likurgius

Дата 28.10.2006, 22:44 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 39
Регистрация: 20.8.2005

Репутация: нет
Всего: нет

Со всех

допустим: www.javaportal.ru, java.sun.com и т.д

getContentLength() возвращает -1.

LSD

Дата 28.10.2006, 23:23 (ссылка)

(нет голосов)

Загрузка ...

Leprechaun Software Developer

Профиль
Группа: Модератор
Сообщений: 15718
Регистрация: 24.3.2004
Где: Dublin

Репутация: 19
Всего: 538

ContentLength равный -1 всего лишь означает, что длинна неизвестна, а не то что там пусто.

Код

import java.io.*;
import java.net.*;

public class AlbumChecker
{
  public static void main(String args[]) throws Exception
  {
    FileOutputStream fw = new FileOutputStream("C:/webpage.txt");
    AlbumChecker obj = new AlbumChecker();

    obj.downloadPage("http://google.com/", fw);
    fw.close();
  }

  public void downloadPage(String Url, OutputStream out) throws Exception
  {
    URL url = new URL(Url);
    HttpURLConnection conn = (HttpURLConnection) url.openConnection();
    conn.setRequestProperty("user-agent", "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; FunWebProducts; .NET CLR 1.1.4322)");
    conn.setRequestMethod("GET");
    int response = conn.getResponseCode();
    if(response == HttpURLConnection.HTTP_OK)
    {
      InputStream input = conn.getInputStream();
      System.out.println("conn.getContentLength() = " + conn.getContentLength());
      int read;
      byte[] buffer = new byte[16 * 1024];
      while((read = input.read(buffer)) != -1)
        out.write(buffer, 0, read);
      input.close();
      out.flush();
    }
    else
    {
      System.err.println("ResponseCode = " + conn.getResponseCode() + " ResponseMessage = " + conn.getResponseMessage());
    }
  }
}

--------------------

Likurgius

Дата 29.10.2006, 13:18 (ссылка)

(нет голосов)

Загрузка ...

Новичок

Профиль
Группа: Участник
Сообщений: 39
Регистрация: 20.8.2005

Репутация: нет
Всего: нет

Ясн. Спасибо smile

0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема \| Java: Работа с сетью \| Следующая тема »