Python爬虫网站图片并下载到本地

逃离我推掉我的手 2022-12-30 03:40 278阅读 0赞

### 文章目录 ###

*   *  先看效果
     *  1、环境准备
     *  2、要爬取的网站
     *  3、程序源代码（可直接运行）

## 先看效果 ##

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L20wXzQ1MjM0NTEw_size_16_color_FFFFFF_t_70]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L20wXzQ1MjM0NTEw_size_16_color_FFFFFF_t_70 1]

## 1、环境准备 ##

import requests
    import re

下载requests库：

pip install requests

## 2、要爬取的网站 ##

https://www.hippopx.com

## 3、程序源代码（可直接运行） ##

> E:\\test 需要在E盘下准备一个test 文件夹，当然，也可以自己更改存储路径

import requests
    import re
    
    keyword = input("请输入中文关键字：")
    baseurl = 'https://www.hippopx.com/zh/search?q='+ str(keyword) +'&page='
    downpage = input("请输入页数：")
    downpage = int(downpage) + 2
    
    picList = []  # 图片列表
    pattern =[]
    num = 0
    
    
    for i in range(2,downpage):
        url = baseurl  + str(i)
        print(url)
        content = requests.get(url).content.decode('utf-8')
        pattern = re.compile('<link itemprop="thumbnail" href="(.+?)"').findall(content)
        # picList.append(pattern)
        picList = picList + pattern
    
    
    print(picList)
    print(len(picList))
    
    
    # 下载图片
    def dowmloadPicture():
        # 定义全局变量
        global num
        print('找到的图片，即将开始下载图片...')
        for each in picList:
            print('正在下载第' + str(num + 1) + '张图片，图片地址:' + str(each))
            try:
                if each is not None:
                    pic = requests.get(each, timeout=7)
                else:
                    continue
            except BaseException:
                print('错误，当前图片无法下载')
                continue
            else:
                # 保存路径
                string =  'E:\test\\' + str(num) + '.jpg'
                fp = open(string, 'wb')
                fp.write(pic.content)
                fp.close()
                num += 1
    
    
    # 调用下载图片方法
    dowmloadPicture()

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L20wXzQ1MjM0NTEw_size_16_color_FFFFFF_t_70]: /images/20221120/8c495baa937546ab9ab02b576044c372.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L20wXzQ1MjM0NTEw_size_16_color_FFFFFF_t_70 1]: /images/20221120/86181207ad4e48d8ba9a5f05b5b94124.png