python中Scrapy的安装详细过程

Bertha 。 2022-09-26 00:22 172阅读 0赞

**目录**

*  安装python
 *  安装pywin32
 *  安装setuptools
 *  安装twisted
    
     *  安装zopeinterface
     *  安装pyopenssl
     *  安装twisted
 *  安装lxml
 *  安装w3lib
 *  安装Scrapy
 *  Scrapy测试

# 安装python #

python的下载地址：[https://www.python.org/downloads/][https_www.python.org_downloads]  
根据自己的电脑是32位还是64位进行，选择适合的python版本，我们常用的是2.7版。安装python很简单，直接点下一步，下一步就行了，这里我就不做过多介绍，但是要注意的是要配置环境变量。如图所示，将python目录和python目录下的Scripts目录添加到系统环境变量的Path里。  
![这里写图片描述][20160913190941417]

如下图所示，测试python是否安装及环境变量配置成功。  
![这里写图片描述][20160913191105032]

# 安装pywin32 #

安装pywin32相当简单，首先是下载，下载地址为：  
[https://sourceforge.net/projects/pywin32/files/pywin32/Build%20220/][https_sourceforge.net_projects_pywin32_files_pywin32_Build_20220]

![这里写图片描述][20160913192751768]

根据自己的电脑进行选择，下载后，直接点下一步下一步就行了，很简单。

# 安装setuptools #

下载地址为：[https://pypi.python.org/pypi/setuptools][https_pypi.python.org_pypi_setuptools]  
在页面中找到  
![这里写图片描述][20160913191755443]

点击 ez\_setup.py进入, 并将内容复制下来, 保存为本地的python脚本

接着切换到 ez\_setup.py所在的目录下，在Windows的命令窗口CMD下运行命令  
python ez\_setup.py

我们使用如下命令来确定setuptools是否安装成功。  
![这里写图片描述][20160913192523359]

# 安装twisted #

## 安装zope.interface ##

首先下载地址为：[https://pypi.python.org/pypi/zope.interface/4.1.0\#downloads][https_pypi.python.org_pypi_zope.interface_4.1.0_downloads]

![这里写图片描述][20160913193028557]

根据自己的电脑选择版本，下载。然后将下载的文件放到python中的Scripts目录下，利用easy\_install安装  
如下为我自己的执行命令：  
![这里写图片描述][20160913193213386]

## 安装pyopenssl ##

下载地址：[https://pypi.python.org/pypi/pyOpenSSL\#downloads][https_pypi.python.org_pypi_pyOpenSSL_downloads]  
![这里写图片描述][20160913193815642]

将其下载下来，安装方式，如下面的代码：  
![这里写图片描述][20160913193918888]

## 安装twisted ##

下载地址为：[http://twistedmatrix.com/Releases/Twisted/13.2/][http_twistedmatrix.com_Releases_Twisted_13.2]

![这里写图片描述][20160913194506683]

下载之后，直接点下一步下一步就行了。

# 安装lxml #

下载地址为：[https://pypi.python.org/pypi/lxml/3.3.1][https_pypi.python.org_pypi_lxml_3.3.1]  
![这里写图片描述][20160913194658126]

根据自己的电脑选择自己的版本，下载后，点击下一步下一步就行了。

# 安装w3lib #

下载地址为： [http://pypi.python.org/packages/source/w/w3lib/w3lib-1.2.tar.gz][http_pypi.python.org_packages_source_w_w3lib_w3lib-1.2.tar.gz]  
下载完毕后将其解压到某一个目录下，如下图  
![这里写图片描述][20160913195119487]

在cmd中，到此目录下执行：

![这里写图片描述][20160913195302566]

# 安装Scrapy #

下载地址：[https://pypi.python.org/pypi/Scrapy][https_pypi.python.org_pypi_Scrapy]  
和前面安装w3lib类似安装Scrapy，下载解压。然后cmd运行。

# Scrapy测试 #

![这里写图片描述][20160913195656677]

[https_www.python.org_downloads]: https://www.python.org/downloads/
[20160913190941417]: /images/20220717/6bfe01ed85494f998481e9dd1990d069.png
[20160913191105032]: /images/20220717/0f82800080874624abb5496c104970ae.png
[https_sourceforge.net_projects_pywin32_files_pywin32_Build_20220]: https://sourceforge.net/projects/pywin32/files/pywin32/Build%20220/
[20160913192751768]: /images/20220717/e99b81f2b39d434294c9dec0dc24152f.png
[https_pypi.python.org_pypi_setuptools]: https://pypi.python.org/pypi/setuptools
[20160913191755443]: /images/20220717/a8f9d195e1fa4c6d8bd0be63a5526b42.png
[20160913192523359]: /images/20220717/400f3dfc2b0848149cdb3ce5cf500532.png
[https_pypi.python.org_pypi_zope.interface_4.1.0_downloads]: https://pypi.python.org/pypi/zope.interface/4.1.0#downloads
[20160913193028557]: /images/20220717/5f8a751ae7d940e4812a8135bb200e30.png
[20160913193213386]: /images/20220717/01dffe5ccdd544f196745dc8528ca2fe.png
[https_pypi.python.org_pypi_pyOpenSSL_downloads]: https://pypi.python.org/pypi/pyOpenSSL#downloads
[20160913193815642]: /images/20220717/ce67693d70dd4cc3aaf19969ccbd12d6.png
[20160913193918888]: /images/20220717/84d980ced20f4dd294293a61c4d2be89.png
[http_twistedmatrix.com_Releases_Twisted_13.2]: http://twistedmatrix.com/Releases/Twisted/13.2/
[20160913194506683]: /images/20220717/59b825bb0420471ba3658b948f440259.png
[https_pypi.python.org_pypi_lxml_3.3.1]: https://pypi.python.org/pypi/lxml/3.3.1
[20160913194658126]: /images/20220717/dd4ad7e91e7042d99fcd40b0914e7c5c.png
[http_pypi.python.org_packages_source_w_w3lib_w3lib-1.2.tar.gz]: http://pypi.python.org/packages/source/w/w3lib/w3lib-1.2.tar.gz
[20160913195119487]: /images/20220717/7f350b14e2b5459b9dbad8da6112554a.png
[20160913195302566]: /images/20220717/3c88a1a420cc41d0b3ad31f40921f604.png
[https_pypi.python.org_pypi_Scrapy]: https://pypi.python.org/pypi/Scrapy
[20160913195656677]: /images/20220717/99d2c395ec92450e838ef11c482782db.png