安装scrapy 爬虫环境的一些体会
1.安装python2.7
安装的时候注意把pip 也安装上,最好选中安装全部
2.更新pip 命令是:pip install -U pip 更新其他包也是如此
python镜像源 pip install -i http://pypi.douban.com/simple xxxx
3.
pip install lxml==3.6.0 (今天重新安装了一下,发现直接 pip install lxml 会安装lxml3.7.0 然后系统又解析不了,只能安装这个版本的 dt:2016/12/12 今天是冬至)
pip install zope.interface
pip install Twisted 对应32位的 如果pip 安装不了就百度下搜索一下直接安装吧 ,....就点击下一步完成....
pip install pyOpenSSL 这个包我有重装过一次 好像是安装不完整被我卸载的了 卸载用 pip uninstall 包名
pip install pywin32 (219) 我这个是手动安装的....pip 找不到
4. 然后pip install scrapy 检测是否成功,在python 环境下调用一下试试 输入:import scropy
如果成功就顺利的出现下一行,如果失败会提示 找不到这个包
5.这是我安装的包 安装 pyOpenSSL 这个包的时候会顺带安装很多包,我也没注意看,需要什么就安装什么。
attrs (16.0.0)
cffi (1.6.0)
cryptography (1.4)
cssselect (0.9.1)
enum34 (1.1.6)
idna (2.1)
ipaddress (1.0.16)
lxml (3.6.0)
MySQL-python (1.2.3)
parsel (1.0.2)
pip (8.1.2)
pyasn1 (0.1.9)
pyasn1-modules (0.0.8)
pycparser (2.14)
PyDispatcher (2.0.5)
pyOpenSSL (16.0.0)
pywin32 (219)
queuelib (1.4.2)
Scrapy (1.1.0)
service-identity (16.0.0)
setuptools (22.0.5)
six (1.10.0)
Twisted (16.2.0)
w3lib (1.14.2)
zope.interface (4.1.3)
我的第一篇博客.................
注意:
其实出现错误 cmd 都有提示 不懂就复制一下到 百度翻译一下就知道大概了, 这里推荐一款可以复制文字的cmd
==> PowerCmd