简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
Heim > Java > javaLernprogramm > Hauptteil

Java-Beispiel – Web Scraping

黄舟
Freigeben： 2017-01-20 11:58:43
Original
1377 Leute haben es durchsucht

Das folgende Beispiel zeigt, wie der URL()-Konstruktor der net.URL-Klasse zum Crawlen einer Webseite verwendet wird: 

/*
 author by w3cschool.cc
 Main.java
 */import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.FileWriter;import java.io.InputStreamReader;import java.net.URL;public class Main {
   public static void main(String[] args) 
   throws Exception {
      URL url = new URL("http://www.w3cschool.cc");
      BufferedReader reader = new BufferedReader
      (new InputStreamReader(url.openStream()));
      BufferedWriter writer = new BufferedWriter
      (new FileWriter("data.html"));
      String line;
      while ((line = reader.readLine()) != null) {
         System.out.println(line);
         writer.write(line);
         writer.newLine();
      }
      reader.close();
      writer.close();
   }}
Nach dem Login kopieren

Das Ausgabeergebnis der Ausführung des obigen Codes ist (die Quellcode der Webseite, gespeichert in der Datei data.html im aktuellen Verzeichnis): 

<!DOCTYPE html> <html> <head> <meta charset="UTF-8"/> 
<meta http-equiv="X-UA-Compatible" content="IE=11,IE=10,IE=9,IE=8"/>……
Nach dem Login kopieren

Das Obige ist das Java-Beispiel – Webseiten-Crawling-Inhalte. Weitere verwandte Inhalte finden Sie unter PHP chinesische Website (www.php.cn)!


Verwandte Etiketten：
Java ，网页抓取
Quelle：php.cn
Vorheriger Artikel：Java-Beispiel – Stellen Sie über Socket eine Verbindung zum angegebenen Host her Nächster Artikel：Ein kleines Beispiel für das Generieren und Parsen von QR-Code-Bildern mit ZXing in Java
Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn
Neueste Artikel des Autors
Aktuelle Ausgaben
Wie kann ich dafür sorgen, dass mein Bild auf der Hauptanzeige der Seite erscheint? Ich möchte einige Fotos über NASAAPI erhalten. Diese Fotos werden dann im Miniaturbild und...
Aus 2024-04-06 15:33:12
0
1
433
return(); funktioniert nicht für eine Route, funktioniert aber für fast dieselbe Route Ich habe zwei Routen, eine zum Abbestellen und eine zum Wiederherstellen. Beide Routen sin...
Aus 2024-04-04 17:34:09
0
1
311
Scrapy: Anleitung zum Speichern im CSV-Format mit benutzerdefinierten Spalteneinstellungen Im Grunde entferne ich also Daten aus dem Web und habe eine Projektdatei in meine Haupt-Sp...
Aus 2024-04-04 14:01:17
0
1
301
Web Scraping: Fehlendes href-Attribut – Müssen Mausklicks für Web Scraping simuliert werden? Für ein unterhaltsames Web-Scraping-Projekt möchte ich NHL-Daten von ttps://www.nhl.com/st...
Aus 2024-04-04 10:32:06
0
1
3473
So suchen Sie nach Titeln und verwenden eine andere Spalte, um die Eindeutigkeit zu überprüfen Ich habe einige abgekratzte Produktdaten in einer Datenbank und möchte diese auf meiner We...
Aus 2024-04-02 21:49:55
0
1
375
verwandte Themen
Mehr>
Beliebte Empfehlungen
Beliebte Tutorials
Mehr>
Verwandte Tutorials
Beliebte Empfehlungen
Aktuelle Kurse
Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage
Über uns Haftungsausschluss Sitemap
Chinesische PHP-Website：Online-PHP-Schulung für das Gemeinwohl，Helfen Sie PHP-Lernenden, sich schnell weiterzuentwickeln！