python3.7.1安装Scrapy爬虫框架

Love The Way You Lie 2022-01-09 11:23 340阅读 0赞

# [python3.7.1安装Scrapy][python3.7.1_Scrapy]爬虫框架    #

环境：win7(64位）， Python3.7.1（64位）

一、安装pyhthon

详见Python环境搭建：http://www.runoob.com/python/python-install.html

二、Scrapy安装介绍

1.运行CMD,输入python --version版本；

2.安装Scrapy：运行CMD，输入：pip install Scrapy

安装结果：安装scrapy报错，在Twisted安装部分

![438439-20190328175747218-599735531.png][]

\*提示：如果安装过程中出现报错pip版本太低，即刻升级pip，代码如下

python -m pip install --upgrade pip
    3.我们需要先安装Twisted，因为直接安装scrapy的话，twisted安装会失败。
    我们到https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted找到twisted的安装包

![438439-20190328180152489-780479466.png][]

4.下载Twisted-18.9.0-cp37-cp37m-win\_amd64.whl；

5.在cmd中输入DOS指令：pip install D:\\TDownloads\\Twisted-18.9.0-cp37-cp37m-win\_amd64.whl

![438439-20190328180813250-1575399850.png][]

6.安装完成后，再次运行：pip install scrapy

7.安装结果：

![438439-20190328180851101-1845443648.png][]

转载于:https://www.cnblogs.com/simpleBlue3/p/10616771.html

[python3.7.1_Scrapy]: https://www.cnblogs.com/thunderLL/p/6523802.html
[438439-20190328175747218-599735531.png]: /images/20220109/825769f8c42c4885b07e3911f41674f5.png
[438439-20190328180152489-780479466.png]: /images/20220109/c8ca9e0c032d4aedaf18384f4ff26b38.png
[438439-20190328180813250-1575399850.png]: /images/20220109/9716289f15b04658b5ea06931ad43611.png
[438439-20190328180851101-1845443648.png]: /images/20220109/1093c5fb85914b74af6648a4a9d353d3.png

发表评论取消回复

表情：

评论列表（有 0 条评论，340人围观）

还没有评论，来说两句吧...

相关阅读

相关 Python Scrapy爬虫框架安装和创建

1、检查Win环境 python版本 > python ![6d8b08151e3d4b22a0dc8aee44aecb8a.png][] 2、whl方式安装 twis

秒速五厘米/ 2023年10月10日 00:56/ 0 赞/ 65 阅读

相关 Python3安装Scrapy爬虫框架

安装scrapy之前，先安装pywin32和Twisted [https://pypi.org/project/Twisted/][https_pypi.org_projec

太过爱你忘了你带给我的痛/ 2023年10月07日 11:05/ 0 赞/ 72 阅读

相关【Python爬虫】Scrapy爬虫框架

Scrapy爬虫框架介绍 ![format_png][] ![format_png 1][] pip install scrapy scrapy -h

╰+哭是因爲堅強的太久メ/ 2023年02月27日 13:40/ 0 赞/ 62 阅读

相关 Python爬虫：scrapy框架怎么安装？

[ ![E7_A8_8B_E5_BA_8F_E5_91_98_icon_github_color_red][]][_E7_A8_8B_E5_BA_8F_E5_91_98_ico

比眉伴天荒/ 2023年01月06日 05:28/ 0 赞/ 189 阅读

相关 Python爬虫之scrapy框架环境安装

文章目录前言一. scrapy框架环境安装二. 创建一个scrapy工程 -------------------- 前言为什么要学习

阳光穿透心脏的1/2处/ 2022年09月04日 01:46/ 0 赞/ 295 阅读

相关 Scrapy - 爬虫框架

Scrapy，Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和 [自

我不是女神ヾ/ 2022年08月21日 05:39/ 0 赞/ 392 阅读

相关 Python爬虫框架Scrapy安装

初级的爬虫我们可以利用urllib和urllib2库以及正则表达式来完成，而高级的功能更强大的爬虫我们可以使用爬虫框架[Scrapy][]来完成。

向右看齐/ 2022年08月04日 13:34/ 0 赞/ 376 阅读

相关 python爬虫使用scrapy框架

scrapy框架提升篇关注公众号“轻松学编程”了解更多 1、创建启动爬虫脚本在项目目录下创建start.py文件： ![这里写图片描述][70] 添加代码

曾经终败给现在/ 2022年05月16日 11:10/ 0 赞/ 373 阅读

相关爬虫框架（Scrapy）安装详解

安装 linux/mac 超简单 pip install scrapy -i [https://pypi.douban.com/simple][https_pypi

ゝ一纸荒年。/ 2022年03月16日 12:52/ 0 赞/ 436 阅读

相关 python3.7.1安装Scrapy爬虫框架

[python3.7.1安装Scrapy][python3.7.1_Scrapy]爬虫框架环境：win7(64位）， Python3.7.1（64位）一

Love The Way You Lie/ 2022年01月09日 11:23/ 0 赞/ 341 阅读