摘要:
在爬虫文件中 1.将解析到的页面数据存储至items对象中 2.使用yield关键字将items提交给管道文件进行处理 在items中 3.在管道文件中编写代码完成数据存储 在pipelines文件中基于管道存储 在pipelines文件中基于存储于mysql中 并在setting文件中设置 4.在 阅读全文
摘要:
安装 1、pip install wheel 2、pip twisted(如报错手动安装) 下载离线的安装(下载自己的版本) https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 然后在cmd 中 pip install (将下载好的文件拖入) 3、 阅读全文