Книги
C#
Глава 11. HTML и веб
Загрузка веб-страницы

C#:
Загрузка веб-страницы

Как:

C# упрощает загрузку веб-страницы с помощью класса HttpClient. Вот быстрый пример:

using System;
using System.Net.Http;
using System.Threading.Tasks;

class Program
{
    static async Task Main(string[] args)
    {
        using (HttpClient client = new HttpClient())
        {
            try
            {
                string url = "http://example.com"; // Замените на желаемый URL
                HttpResponseMessage response = await client.GetAsync(url);
                response.EnsureSuccessStatusCode();
                string responseBody = await response.Content.ReadAsStringAsync();
                
                Console.WriteLine(responseBody); // Выводит исходное HTML-содержимое
            }
            catch (HttpRequestException e)
            {
                Console.WriteLine("\nИсключение Поймано!");
                Console.WriteLine("Сообщение: {0} ", e.Message);
            }
        }
    }
}

Это выведет HTML-содержимое указанной веб-страницы в консоль.

Погружение в Детали

До HttpClient, C# использовал такие классы, как WebClient и HttpWebRequest для загрузки веб-содержимого. HttpClient - это последняя разработка и создан, чтобы быть многоразовым, эффективным и поддерживать асинхронные операции, что делает его предпочтительным выбором для новых приложений.

Существуют альтернативы. Например, сторонние библиотеки, такие как HtmlAgilityPack, могут анализировать HTML, что упрощает навигацию по DOM или извлечение конкретных фрагментов информации без работы с исходными HTML-строками.

При загрузке веб-страниц помните: уважайте файлы robots.txt, обрабатывайте исключения и будьте внимательны к условиям использования веб-сайтов.

Смотрите Также

Разбор HTML