简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
首页 > Java > java教程 > 正文

Java 实例 - 网页抓取

黄舟
发布： 2017-01-20 11:58:43
原创
1319 人浏览过

以下实例演示了如何使用 net.URL 类的 URL() 构造函数来抓取网页：

/*
 author by w3cschool.cc
 Main.java
 */import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.FileWriter;import java.io.InputStreamReader;import java.net.URL;public class Main {
   public static void main(String[] args) 
   throws Exception {
      URL url = new URL("http://www.w3cschool.cc");
      BufferedReader reader = new BufferedReader
      (new InputStreamReader(url.openStream()));
      BufferedWriter writer = new BufferedWriter
      (new FileWriter("data.html"));
      String line;
      while ((line = reader.readLine()) != null) {
         System.out.println(line);
         writer.write(line);
         writer.newLine();
      }
      reader.close();
      writer.close();
   }}
登录后复制

以上代码运行输出结果为（网页的源代码，存储在当前目录下的 data.html 文件中）：

<!DOCTYPE html> <html> <head> <meta charset="UTF-8"/> 
<meta http-equiv="X-UA-Compatible" content="IE=11,IE=10,IE=9,IE=8"/>……
登录后复制

以上就是Java 实例 - 网页抓取的内容，更多相关内容请关注PHP中文网（www.php.cn）！


相关标签：
Java ，网页抓取
来源：php.cn
上一篇：Java 实例 - 使用 Socket 连接到指定主机 下一篇：java中ZXing 生成、解析二维码图片的小示例
本站声明
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
作者最新文章
最新问题
如何使用 PHP 与 Google Analytics Data API (GA4) 结合使用多个过滤器 所以这是我的第一个问题，我会尽力遵守社区规则。我正在尝试使用PHP在GoogleAnalyticsDataAPI(GA4)中使用多个过滤器。我已经成功地能够使用一个过滤器并将其显示...
来自于 2023-11-04 14:39:38
0
1
188
如何在 google chrome 中从 HTML 运行 python 脚本？ 我正在构建一个chrome扩展程序，我想通过单击扩展程序（基本上是HTML）中的按钮来运行我的PC中的python脚本。python脚本使用seleniumweb-driver从网...
来自于 2023-11-02 23:34:24
0
1
400
BeautifulSoup 摄取所有数据，但 .findAll() 仅返回一个父级的链接 我正在尝试使用Python中的BeautifulSoup抓取网站。所有数据都被摄取，包括我试图访问的所有链接。但是，当我使用.findAll()函数时，它仅返回我正在查找的链接的一...
来自于 2023-09-14 12:14:43
0
1
169
网络错误：net::ERR_BLOCKED_BY_CLIENT和403错误的mongodb 我有一个React网站的代码，我从Windows的git中将其拉到了Mac上。我的所有代码以前都运行良好，但现在当我运行网站时，我什至无法加载它并收到以下错误。该页面首先通过api...
来自于 2023-09-13 21:32:40
0
1
220
重新表述的标题为：提取图像的原始文件 我正在尝试获取网页上特定图像的src。当我输入我的代码时，输出是一个未定义的错误。未捕获类型错误：无法读取未定义的属性（读取“getAttribute”）这是HTML代码<d...
来自于 2023-09-13 19:36:22
0
1
271
相关专题
更多>
热门推荐
热门教程
更多>
相关教程
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责声明 Sitemap
PHP中文网：公益在线PHP培训，帮助PHP学习者快速成长！