Модераторы: Partizan, gambit
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> Получить текст HTML-странички, Получить текст HTML-странички 
:(
    Опции темы
davandr
Дата 17.8.2006, 10:51 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 304
Регистрация: 25.10.2005
Где: Украина, Харьков

Репутация: нет
Всего: нет
Всем привет!
Заинтересовал такой вопрос, возможно ли получить текст HTML-странички без использования визуальных компонентов, т.е. например, при написании своего сервиса.


--------------------
Аренда VPS хостинга в России
PM MAIL   Вверх
ivashkanet
Дата 17.8.2006, 11:18 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Кодю потиху
****


Профиль
Группа: Участник Клуба
Сообщений: 3684
Регистрация: 23.2.2006
Где: Гомель, Беларусь

Репутация: 47
Всего: 149
Цитата(davandr @  17.8.2006,  10:51 Найти цитируемый пост)
возможно

Можно  smile 
Я пробовал такую штуку замутить, но она у мя криво получилась. Может у тя что лучше выйдет smile
Попробовал еще раз и получилось  smile 
Код

HttpWebRequest request = (HttpWebRequest)WebRequest.Create(@"http://forum.vingrad.ru/index.php?showtopic=108198&st=0&#entry824527");

HttpWebResponse respodse = (HttpWebResponse)request.GetResponse();

StreamReader readStream = new StreamReader(respodse.GetResponseStream(), Encoding.GetEncoding("windows-1251"));

label1.Text = readStream.ReadToEnd();

Красота  smile 


--------------------
design, simplicity, and experience with a technology focus
PM MAIL WWW ICQ   Вверх
davandr
Дата 17.8.2006, 12:12 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 304
Регистрация: 25.10.2005
Где: Украина, Харьков

Репутация: нет
Всего: нет
Ну, все классно! Пасиба!


--------------------
Аренда VPS хостинга в России
PM MAIL   Вверх
mr.DUDA
Дата 17.8.2006, 12:21 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


3D-маньяк
****


Профиль
Группа: Экс. модератор
Сообщений: 8244
Регистрация: 27.7.2003
Где: город-герой Минск

Репутация: 110
Всего: 232
Класс WebClient в помощь:

Код
using System;
using System.Net;
using System.IO;

namespace ConsoleApplication3
{
    class Program
    {
        static void Main()
        {
            WebClient client = new WebClient();
    
            // если через прокси-сервер, то нужно это:
            client.Proxy = WebProxy.GetDefaultProxy();
            if(client.Proxy != null)
                client.Proxy.Credentials = CredentialCache.DefaultNetworkCredentials;
            
            // просто открываем и читаем
            Stream stream = client.OpenRead("http://www.google.com");
            if (stream != null)
            {
                StreamReader reader = new StreamReader(stream);
                Console.Write(reader.ReadToEnd());
            }
        }
    }
}



--------------------
user posted image
PM MAIL WWW   Вверх
ivashkanet
Дата 17.8.2006, 13:18 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Кодю потиху
****


Профиль
Группа: Участник Клуба
Сообщений: 3684
Регистрация: 23.2.2006
Где: Гомель, Беларусь

Репутация: 47
Всего: 149
Цитата(davandr @  17.8.2006,  12:12 Найти цитируемый пост)
Пасиба!

Не за что. Приходи еще  smile 
mr.DUDA, буду знать про WebClient  smile 


--------------------
design, simplicity, and experience with a technology focus
PM MAIL WWW ICQ   Вверх
davandr
Дата 22.8.2006, 11:25 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 304
Регистрация: 25.10.2005
Где: Украина, Харьков

Репутация: нет
Всего: нет
А что делать, если содержимое невозможно просмотреть напрямую через адресную строку, а можно только по нажатию на кнопку или ссылку на главной странице? Урл получается как бы каждый раз новый. Как в таком случае прогораммно можно прочитать страницу контента?


--------------------
Аренда VPS хостинга в России
PM MAIL   Вверх
ivashkanet
Дата 22.8.2006, 11:40 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Кодю потиху
****


Профиль
Группа: Участник Клуба
Сообщений: 3684
Регистрация: 23.2.2006
Где: Гомель, Беларусь

Репутация: 47
Всего: 149
davandr, для этих целей в классе HttpWebRequest есть куча необходимых подклассов. Например куки и др.
В них и запихивается дополнительная информация. 
Только перед этим ее нужно еще найти   smile

Добавлено @ 11:41 
В WebClient, ИМХО, то же они есть smile


--------------------
design, simplicity, and experience with a technology focus
PM MAIL WWW ICQ   Вверх
mr.DUDA
Дата 22.8.2006, 11:57 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


3D-маньяк
****


Профиль
Группа: Экс. модератор
Сообщений: 8244
Регистрация: 27.7.2003
Где: город-герой Минск

Репутация: 110
Всего: 232
Цитата(davandr @  22.8.2006,  11:25 Найти цитируемый пост)
А что делать, если содержимое невозможно просмотреть напрямую через адресную строку, а можно только по нажатию на кнопку или ссылку на главной странице? Урл получается как бы каждый раз новый. Как в таком случае прогораммно можно прочитать страницу контента?

Если жаваскрипта нет, то нажатие на кнопку приводит либо к отправке POST, либо GET-запроса (определяется тегом <form ... method="post">), значит если знаем что за страница - то смотрим в содержимое, определяем тип запроса и воспроизводим у себя в коде.


--------------------
user posted image
PM MAIL WWW   Вверх
davandr
Дата 22.8.2006, 12:42 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 304
Регистрация: 25.10.2005
Где: Украина, Харьков

Репутация: нет
Всего: нет
Цитата(mr.DUDA @  22.8.2006,  11:57 Найти цитируемый пост)
 значит если знаем что за страница - то смотрим в содержимое, определяем тип запроса и воспроизводим у себя в коде. 


а можно Вас попросить какой-нить примерчик или ссылку

PS у меня post запрос


--------------------
Аренда VPS хостинга в России
PM MAIL   Вверх
mr.DUDA
Дата 22.8.2006, 13:07 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


3D-маньяк
****


Профиль
Группа: Экс. модератор
Сообщений: 8244
Регистрация: 27.7.2003
Где: город-герой Минск

Репутация: 110
Всего: 232
Что-то типа того:
Код
using System;
using System.Net;
using System.IO;
using System.Text;

namespace ConsoleApplication3
{
    class Program
    {
        static void Main()
        {
            string url = ...
            HttpWebRequest request = (HttpWebRequest)HttpWebRequest.Create(url);
            request.Proxy = WebProxy.GetDefaultProxy();
            if (request.Proxy != null)
                request.Proxy.Credentials = CredentialCache.DefaultNetworkCredentials;

            // параметры для POST-запроса
            string postData = "имя_поля=значение";
            byte[] content = new ASCIIEncoding().GetBytes(postData);

            // настраиваем запрос
            request.Method = "POST";
            request.ContentType = "application/x-www-form-urlencoded";
            request.ContentLength = content.Length;
            
            // выполняем запрос
            Stream stream = request.GetRequestStream();
            stream.Write(content, 0, content.Length);

            // получаем ответ
            WebResponse response = request.GetResponse();
            StreamReader reader = new StreamReader(response.GetResponseStream());
            string html = reader.ReadToEnd();

            // сохраним в файл для дальнейшего изучения
            new StreamWriter(@"c:\1.html").Write(html);
        }
    }
}



--------------------
user posted image
PM MAIL WWW   Вверх
davandr
Дата 23.8.2006, 13:07 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 304
Регистрация: 25.10.2005
Где: Украина, Харьков

Репутация: нет
Всего: нет
А как быть, если нужно передать не одно значение, а несколько параметров, массив  значений? 


--------------------
Аренда VPS хостинга в России
PM MAIL   Вверх
ivashkanet
Дата 23.8.2006, 13:59 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Кодю потиху
****


Профиль
Группа: Участник Клуба
Сообщений: 3684
Регистрация: 23.2.2006
Где: Гомель, Беларусь

Репутация: 47
Всего: 149
Порылся в инете и надел такую штуку:
Цитата
PostData = "username=myUsername&password=myPassword&id=1183&request=quote
&Symbol=" & strSymbol & "&type=query"


Добавлено @ 14:00 
Это ASP, но я думаю понятно , что нужно использовать & как разделитель smile


--------------------
design, simplicity, and experience with a technology focus
PM MAIL WWW ICQ   Вверх
mr.DUDA
Дата 24.8.2006, 08:54 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


3D-маньяк
****


Профиль
Группа: Экс. модератор
Сообщений: 8244
Регистрация: 27.7.2003
Где: город-герой Минск

Репутация: 110
Всего: 232
Вроде так покатит только для GET-запросов (всё в одну строку). Для POST лучше почитать спецификацию RFC или Wiki, что-то говорит мне что там каждый параметр начинается с новой строки (это перем. postData).


--------------------
user posted image
PM MAIL WWW   Вверх
  
 Ответ в темуСоздание новой темы Создание опроса
Прежде чем создать тему, посмотрите сюда:
mr.DUDA
THandle
Используйте теги [code=csharp][/code] для подсветки кода. Используйтe чекбокс "транслит" если у Вас нет русских шрифтов.
Что делать если Вам помогли, но отблагодарить помощника плюсом в репутацию Вы не можете(не хватает сообщений)? Пишите сюда, или отправляйте репорт. Поставим :)
Так же не забывайте отмечать свой вопрос решенным, если он таковым является :)

Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, mr.DUDA, THandle.
 
1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Общие вопросы по .NET и C# | Следующая тема »

Подписаться на тему | Подписка на этот форум | Скачать/Распечатать тему


 




[ Время генерации скрипта: 0.0876 ]   [ Использовано запросов: 21 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
 По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.