摘要: 在爬虫文件中 1.将解析到的页面数据存储至items对象中 2.使用yield关键字将items提交给管道文件进行处理 在items中 3.在管道文件中编写代码完成数据存储 在pipelines文件中基于管道存储 在pipelines文件中基于存储于mysql中 并在setting文件中设置 4.在 阅读全文
posted @ 2019-05-22 23:16 新手码农__威 阅读(556) 评论(0) 推荐(0) 编辑
摘要: 安装 1、pip install wheel 2、pip twisted(如报错手动安装) 下载离线的安装(下载自己的版本) https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 然后在cmd 中 pip install (将下载好的文件拖入) 3、 阅读全文
posted @ 2019-05-22 15:46 新手码农__威 阅读(513) 评论(0) 推荐(0) 编辑