网络爬虫常用框架ScrapyScrapy爬虫框架的安装

由于Scrapy爬虫框架依赖的库比较多，所以在安装时，步骤比较繁琐。

其依赖的库有Twisted.lxml.pyOpenSSL.pywin32,其中，主要需要啊安装的库有Twisted.pywin32，至于lxml与pyOpenSSL库在安装 Scrapy框架时顺带就安装了。

Scrapy爬虫框架的安装详细教程

（1）安装Twisted模块，在网站https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted找到Twisted的安装包。然后，文件下载完成后，在其文件存储位置中以管理员身份运行命令提示符，进行安装。

pip install 文件地址

操作如下：

首先，打开网站，然后，Ctrl F，调出搜索栏，在搜索栏中查询Twisted，并进行安装。

注意：在安装Twisted模块时，需要根据安装的python版本进行安装，例如，小编的python版本为3.11，则安装cp311最后win32与win64系统则看电脑的配置。（python的版本，不是pycharm的版本）

 其次：在文件存储位置中打开命令提示符需要shift 鼠标右键，选择“在此处打开命令窗口”如果没有此选项，或为“在终端中打开”的话，点击在终端中打开，打开之后，在窗口中点击小箭头。然后在下拉菜单中选择命令提示符。这样就可以打开命令提示符了，然后在其中输入内容即可。

（2）安装Scrapy模块，在打开的命令提示符窗口中输入pip install Scrapy命令，安装Scrapy框架。

（3）安装pywin32模块，在刚才的命令提示符中接着输入pip install pywin32命令，安装pywin32模块，安装完成后，可以在命令提示符窗口中输入import pywin32_system32,如果没有错误信息，则安装成功。

这篇好文章是转载于：学新通技术网