Bøker
Dart
Kapittel 11. HTML og nettet
Nedlasting av en nettside

Dart:
Nedlasting av en nettside

Hvordan:

Dart tilbyr http-pakken, et populært tredjepartsbibliotek for å gjøre HTTP-forespørsler. Her er et grunnleggende eksempel på hvordan man bruker det til å laste ned en nettside:

Først, legg til http-pakken i din pubspec.yaml:

dependencies:
  http: ^0.13.3

Deretter, importer pakken og bruk den til å hente innholdet på en nettside:

import 'package:http/http.dart' as http;

Future<void> main() async {
  var url = Uri.parse('http://example.com');
  var response = await http.get(url);
  if (response.statusCode == 200) {
    print('Side lastet ned:');
    print(response.body);
  } else {
    print('Forespørsel feilet med status: ${response.statusCode}.');
  }
}

Eksempel på output (dette vil variere basert på innholdet på nettsiden):

Side lastet ned:
<!doctype html>
<html>
<head>
    <title>Eksempeldomene</title>
...
</html>

For mer komplekse scenarioer, som håndtering av informasjonskapsler eller innstilling av brukeragentoverskrifter, ville du bruke samme http-pakke, men med ekstra konfigurasjoner til din forespørsel:

import 'package:http/http.dart' as http;

Future<void> main() async {
  var headers = {
    'User-Agent': 'DinEgenBrukeragent/1.0',
    'Cookie': 'navn=verdi; navn2=verdi2',
  };
  var url = Uri.parse('http://example.com');
  var response = await http.get(url, headers: headers);

  if (response.statusCode == 200) {
    print('Side lastet ned med tilpassede overskrifter:');
    print(response.body);
  } else {
    print('Forespørsel feilet med status: ${response.statusCode}.');
  }
}

Å bruke overskrifter som disse kan etterligne nettleserforespørsler mer nøyaktig, noe som er spesielt nyttig når man har å gjøre med nettsteder som har spesifikke krav eller beskyttelser mot skraping.

Analysering av HTML