Java 爬取网页

Dear 丶 2023-05-21 11:47 263阅读 0赞

##### 我们使用 net.URL 类的 URL() 构造函数来抓取网页 #####

**代码如下**

import java.io.BufferedReader;
    import java.io.BufferedWriter;
    import java.io.FileWriter;
    import java.io.InputStreamReader;
    import java.net.URL;
     
    public class Main { 
       public static void main(String[] args) 
       throws Exception { 
          URL url = new URL("http://www.baidu.com");
          BufferedReader reader = new BufferedReader
          (new InputStreamReader(url.openStream()));
          BufferedWriter writer = new BufferedWriter
          (new FileWriter("test.html"));
          String line;
          while ((line = reader.readLine()) != null) { 
             System.out.println(line);
             writer.write(line);
             writer.newLine();
          }
          reader.close();
          writer.close();
       }
    }

结果输出

<!DOCTYPE html> <html> <head> <meta charset="UTF-8"/> <meta http-equiv="X-UA-Compatible" content="IE=11,IE=10,IE=9,IE=8"/>……

![在这里插入图片描述][20200418175845849.gif]

[20200418175845849.gif]: /images/20230521/1be58e8e73a54743b74cbc65232bc538.png

发表评论取消回复

表情：

评论列表（有 0 条评论，263人围观）

还没有评论，来说两句吧...

相关阅读

相关 Python爬取网页内容

import urllib.request url = "https://blog.csdn.net/zhangphil" response

浅浅的花香味﹌/ 2024年02月19日 17:17/ 0 赞/ 86 阅读

相关 Java 爬取网页

我们使用 net.URL 类的 URL() 构造函数来抓取网页代码如下 import java.io.BufferedReader; import j

Dear 丶/ 2023年05月21日 11:47/ 0 赞/ 264 阅读

相关 Java爬取网页数据

文章目录 1、导入依赖 2、源代码 1、导入依赖  <dependency>

灰太狼/ 2023年01月17日 03:27/ 0 赞/ 241 阅读

相关 java 爬取网页代码

package text; import java.io.BufferedReader; import java.io.IOException

客官°小女子只卖身不卖艺/ 2022年12月22日 00:56/ 0 赞/ 215 阅读

相关利用Jsoup爬取网页内容

jsoup的强大之处在这里就不多说，最近在写项目，需要爬取网页上的内容，自然想到的是利用Jsoup来处理，项目中是利用Jsoup爬取学校信息门户的新闻消息，然后放进客户端网

╰+哭是因爲堅強的太久メ/ 2022年07月18日 05:24/ 0 赞/ 277 阅读

相关学习python爬取网页

新手学习python爬取网页先用下面4个库就够了：（第4个是实在搞不定用的，当然某些特殊情况它也可能搞不定） 1. 打开网页，下载文件：urllib 2

柔情只为你懂/ 2022年07月14日 09:21/ 0 赞/ 320 阅读

相关 node：爬虫爬取网页图片

> 代码地址如下： > [http://www.demodashi.com/demo/13845.html][http_www.demodashi.com_demo_138

素颜马尾好姑娘i/ 2022年05月11日 04:36/ 0 赞/ 357 阅读

相关 python爬取网页文本、图片

从网页爬取文本信息： eg:从[http://computer.swu.edu.cn/s/computer/kxyj2xsky/][http_computer.swu.

蔚落/ 2021年12月10日 07:37/ 0 赞/ 462 阅读

相关网页源码爬取

java实现网络爬虫爬取单一页面 package liuwenwu.test; import java.io.; import java

「爱情、让人受尽委屈。」/ 2021年10月20日 00:56/ 0 赞/ 424 阅读

相关爬取网页图片

下载表情包吧指定网页的所有图片 #coding:utf-8 import urllib.request import urllib.parse import urlli...

系统管理员/ 2021年05月03日 05:44/ 0 赞/ 678 阅读