Java爬取网站的所有图片链接

「爱情、让人受尽委屈。」 2022-09-06 14:27 217阅读 0赞

### 文章目录 ###

*   *  一、准备
     *  二、引入依赖
     *  三、源代码

## 一、准备 ##

jsoup是一个用于处理真实世界 HTML 的 Java 库。它使用最好的 HTML5 DOM 方法和 CSS 选择器提供了一个非常方便的 API，用于获取 URL 以及提取和操作数据。

jsoup实现了WHATWG HTML5规范，并将 HTML 解析为与现代浏览器相同的 DOM。

*  从 URL、文件或字符串中抓取和解析HTML；
 *  使用 DOM 遍历或 CSS 选择器查找和提取数据；
 *  操作HTML 元素、属性和文本；
 *  根据安全列表清理用户提交的内容，以防止 XSS 攻击；
 *  输出整洁的 HTML。

## 二、引入依赖 ##

<dependency>
        <groupId>org.jsoup</groupId>
        <artifactId>jsoup</artifactId>
        <version>${latest.version}</version>
    </dependency>

## 三、源代码 ##

public class JsoupTest { 
        public static void main(String[] args) throws IOException { 
        	// 网址
            String url = "https://www.***.com/";
            Document doc = Jsoup.connect(url)
                    .maxBodySize(Integer.MAX_VALUE)
                    .userAgent("Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36")
                    .timeout(6000)
                    .get();
                    
    		// 获取img标签的内容，读取属性输出
            Elements imgs = doc.getElementsByTag("img");
            imgs.stream().forEach(s-> { 
                System.out.println(s.attr("src"));
                System.out.println(s.attr("alt"));
            });
        }
    }

发表评论取消回复

表情：

评论列表（有 0 条评论，217人围观）

还没有评论，来说两句吧...

相关阅读

相关生成一个自动爬取某个网站所有图片的爬虫

编写一个爬虫来自动爬取某个网站的图片需要使用编程语言和爬虫框架。下面是用 Python 编写的示例代码，使用了 BeautifulSoup 库和 Requests 库。

末蓝、/ 2023年09月29日 22:48/ 0 赞/ 6 阅读

相关 Jsoup爬取网站图片

Jsoup 是一款 Java 的 HTML 解析器，我们可以用它进行网站图片的爬取，然后下载到本地文件夹中。首先在pom.xml中添加依赖。 <dependen

谁践踏了优雅/ 2023年01月21日 13:23/ 0 赞/ 277 阅读

相关 Java爬取网站图片

[Java爬虫-使用爬虫下载千张美女图片！][Java_-] [https://blog.csdn.net/qq\_35402412/article/details/113

ゞ浴缸里的玫瑰/ 2022年09月10日 05:14/ 0 赞/ 306 阅读

相关 Java爬取网站的所有图片链接

文章目录一、准备二、引入依赖三、源代码一、准备 jsoup是一个用于处理真实世界 HTML 的 Java 库。

「爱情、让人受尽委屈。」/ 2022年09月06日 14:27/ 0 赞/ 218 阅读

相关 Python爬虫——爬取网站的图片

爬虫这东西最早出现在我大学计算机网络的课程上面，我们当时的老师人很好，期末不笔试，他说这东西笔试没什么用，对于一个年纪比较大的老师来讲，能提出这种方式，实在难得。当时在考虑

比眉伴天荒/ 2022年08月10日 09:28/ 0 赞/ 425 阅读

相关 python 爬取网站图片例子

import bs4 import requests url = 'http://xkcd.com' os.makedirs('xkc

「爱情、让人受尽委屈。」/ 2022年05月24日 04:56/ 0 赞/ 349 阅读

相关使用scrapy框架爬取带反盗链网站的图片

1、以趣图网为例，首先复制趣图的图片的地址发现图片无法打开，每个图片打开都变成了如下图所示： ![70][] 出现上述情况的原因则是因为该网站采用了防盗链，为了防止爬虫，可

﹏ヽ暗。殇╰゛Y/ 2022年05月21日 03:17/ 0 赞/ 262 阅读

相关 scrapy爬取链接后再爬取链接内容

以下代码是在python3.6环境下测试通过 !/usr/bin/python -- coding:utf-8 -- from scrapy.h

╰+攻爆jí腚メ/ 2022年05月15日 15:10/ 0 赞/ 353 阅读

相关 Node.js爬虫，爬取一个网站，并下载所有图片

这里用 ‘去哪网’ 为例：首先，我们的目标是： 1.爬取一个网站 2.将网站的所有图片下载到本地注释比较清楚了，大家可以直接复制使用； const

待我称王封你为后i/ 2022年03月18日 08:58/ 0 赞/ 221 阅读

相关爬取某个链接里面的所有图片...

直接上代码 -- coding: utf-8 -- import urllib from bs4 import BeautifulSoup

阳光穿透心脏的1/2处/ 2021年09月16日 06:04/ 0 赞/ 284 阅读