4k图片爬取+中文乱码

墨蓝 2023-06-02 10:44 26阅读 0赞

## 4k图片爬取+中文乱码 ##

此案例有三种乱码解决方法，推荐第一种

4k图片爬取其实和普通图片爬取的过程是没有本质区别的

import requests
    import os
    from lxml import etree
    
    headers = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36"
    }
    
    def work():
        if not os.path.exists("img"):
            os.mkdir("img")
        url="http://pic.netbian.com/4kqiche/"
        res=requests.get(url=url,headers=headers)
        #最推荐方法
        res.encoding=res.apparent_encoding
        #res.encoding="utf8"
        tree=etree.HTML(res.text)
        imgs=tree.xpath("//ul[@class='clearfix']//a")
        for i in imgs:
            img_u=i.xpath("./img/@src")[0]
            img_url="http://pic.netbian.com"+img_u
            img_name=i.xpath("./b/text()")[0]
            # .encode("ISO-8859-1").decode("utf8")
            img_content=requests.get(url=img_url,headers=headers).content
            with open(f"img/{img_name}.jpg","wb")as fw:
                fw.write(img_content)
                print(img_name+"下载成功")
    if __name__ == '__main__':
        work()

转载于:https://www.cnblogs.com/zx125/p/11409258.html

发表评论取消回复

表情：

评论列表（有 0 条评论，26人围观）

还没有评论，来说两句吧...

相关阅读

相关爬虫实例（二）—— 爬取高清4K图片

爬虫实例（二）—— 高清4K图片下载

Dear 丶/ 2024年04月28日 07:50/ 0 赞/ 86 阅读

相关 urllib爬取图片

使用 urllib 库来爬取图片 > import urllib.request > > 图片的 URL 链接 > image_url

水深无声/ 2023年10月09日 21:41/ 0 赞/ 67 阅读

相关 4k图片爬取+中文乱码

4k图片爬取+中文乱码此案例有三种乱码解决方法，推荐第一种 4k图片爬取其实和普通图片爬取的过程是没有本质区别的 import requests i

墨蓝/ 2023年06月02日 10:44/ 0 赞/ 27 阅读

相关如何用爬虫爬取4K美女图片

一、首先先加载必要的库 -- coding: UTF-8 -- import requests from random import choic

柔情只为你懂/ 2022年11月03日 05:28/ 0 赞/ 259 阅读

相关 Python爬取图片

参考了别人的代码。给代码添加了多线程和Queue的结合应用。 \[python\] [ view plain][view plain] [copy][view plain]

心已赠人/ 2022年08月13日 13:52/ 0 赞/ 312 阅读

相关爬取图片

\----- 爬取百度贴吧的图片： \ coding=utf-8 import urllib import re def getHtml(url): pa

痛定思痛。/ 2022年06月07日 02:54/ 0 赞/ 307 阅读

相关爬取美女图片(python源码)

使用requests库 + 网页分析 import requests 爬取美女图片 url = "http://m.mm131.com/xingg

素颜马尾好姑娘i/ 2022年06月06日 00:27/ 0 赞/ 294 阅读

相关 nodejs爬取网页乱码解决方法

var req = https.request(options, function (res) { res.setEncoding('

秒速五厘米/ 2021年10月23日 23:22/ 0 赞/ 438 阅读

相关爬取网页图片

下载表情包吧指定网页的所有图片 #coding:utf-8 import urllib.request import urllib.parse import urlli...

系统管理员/ 2021年05月03日 05:44/ 0 赞/ 680 阅读

相关 Python爬取图片

import requests # 模块导入的俩种方法 from multiprocessing import Pool import...

灰太狼/ 2021年04月08日 04:26/ 0 赞/ 780 阅读