책들
Rust
제11장. HTML과 웹
HTML 파싱

Rust:
HTML 파싱

방법:

Rust에서 HTML을 파싱하기 위해서 종종 scraper 크레이트를 사용하게 됩니다. 이는 HTML 문서를 순회하고 조작하는 데 필요한 고수준 인터페이스를 제공합니다.

첫째, Cargo.toml에 scraper를 추가하세요:

[dependencies]
scraper = "0.12.0"

다음은 주어진 HTML 문자열로부터 모든 링크 URL을 추출하는 간단한 예제입니다:

extern crate scraper;

use scraper::{Html, Selector};

fn main() {
    let html = r#"
    <html>
    <body>
        <a href="http://example.com/1">링크 1</a>
        <a href="http://example.com/2">링크 2</a>
    </body>
    </html>
    "#;

    let document = Html::parse_document(html);
    let selector = Selector::parse("a").unwrap();

    for element in document.select(&selector) {
        let link = element.value().attr("href").unwrap();
        println!("링크 발견: {}", link);
    }
}

출력:

링크 발견: http://example.com/1
링크 발견: http://example.com/2

이 예제에서, 우리는 간단한 HTML 문서를 파싱하여 모든 <a> 요소를 찾고 그들의 href 속성을 추출하여 문서의 모든 링크 URL을 출력합니다. scraper 라이브러리는 CSS 선택자를 사용하여 특정 요소를 선택하고 HTML 파싱을 간소화하여, Rust에서 웹 스크래핑 작업을 위한 선택지가 됩니다.

웹 페이지 다운로드하기HTTP 요청 보내기