python3.7安装Scrapy

Python3.7安装scrapy

按照笔者看的一本书的教材，分为以下三步骤：

1.pip install twisted.

2.pip install lxml

3.pip install scrapy

虽然就是这简短的3个步骤，但是却有许多坑一般。

本人刚开始是安装的python3.9，无论如何也安不上，找了许多教程，最终重新安装了python3.7.5才算搞定。特别要注意的就是重装python3.7.5一定要重新配置环境变量。

即要改变python的环境变量，也要改变python下scripts文件夹的环境变量。

 需要注意的就是环境变量里面的path是由上而下生效，所以修改后的路径最好是放在前面。

环境变量配置好以后直接pip install twisted就一帆风顺了。

 

 

pip install lxml也是没有什么问题

到了最后pip install scrapy又出现了问题：这么长一大堆，有点懵，但是看见这个warning，决定先解决掉。于是直接根据提示更新了pip。更新完成再次重新安装scrapy，终于搞定了。

 

 

 

 

 

 

 

 

twisted下载网站，不太建议使用这个：https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted