Python 实用爬虫-01-检测爬虫的 IP

男娘i 2022-05-15 14:28 262阅读 0赞

### Python 实用爬虫-01-检测爬虫的 IP ###

*  本篇介绍一个识别爬虫 ip 的小实例（教你一招识破无效的 ip 代理）

### 【注意事项】： ###

*  1.url 可能会失效（个人感觉，因为它带了一个2018，下面附上链接获取方法）
 *  2.当然使用的时候，只需两步：
    
     *  （1）把你的爬虫的 url 换成下面的 url，目前是：[http://2018.ip138.com/ic.asp][http_2018.ip138.com_ic.asp]
     *  （2）把 decode() 方法的参数要设置成 ‘GBK’ （默认的 ‘utf-8’ 是不行的）
 *  代码 [ipQuery.py][] 文件：[https://xpwi.github.io/py/spider/ipQuery.py][https_xpwi.github.io_py_spider_ipQuery.py]

# coding: utf-8
    # 测爬虫 ip 工具
    from urllib import request,error
    
    if __name__ == '__main__':
        # 该地址可能会失效，如果失效，请参照：https://www.cnblogs.com/xpwi/p/9610887.html
        url = "http://2018.ip138.com/ic.asp"
        rsp = request.urlopen(url)
        html = rsp.read().decode('GBK')
        print(html)

### 运行结果 ###

![1483449-20180908220936227-815225691.jpg][]

### 下面介绍怎么获取查询 ip 的地址 ###

*  在百度搜索关键字：ip，点击 IP地址查询
 *  或者直接访问：[http://www.ip138.com/][http_www.ip138.com]
 *  操作截图：  
    ![1483449-20180908221833604-244055241.jpg][]
 *  右键，点击【查看页面源代码】
 *  【搜索】关键字：【地理位置】
 *  下面是一个 iframe 标签，地址就在那  
    ![1483449-20180908222422147-1192893453.jpg][]

### 更多文章链接：[实用爬虫][Link 1] ###

--------------------

\- 本笔记不允许任何个人和组织转载

[http_2018.ip138.com_ic.asp]: http://2018.ip138.com/ic.asp
[ipQuery.py]: http://ipQuery.py
[https_xpwi.github.io_py_spider_ipQuery.py]: https://xpwi.github.io/py/spider/ipQuery.py
[1483449-20180908220936227-815225691.jpg]: /images/20220503/5a7278019a934ee187e04d6fd86f6b4a.png
[http_www.ip138.com]: http://www.ip138.com/
[1483449-20180908221833604-244055241.jpg]: /images/20220503/d08e893a93c14d139f28f93fa9b76204.png
[1483449-20180908222422147-1192893453.jpg]: /images/20220503/14fb1155965e4944a521b9ddad9ca20a.png
[Link 1]: https://www.cnblogs.com/xpwi/category/1296535.html