2018年7月30日
selenium爬去数据+存储
摘要： 1 爬去数据代码 2 存入到mysql中 创建一个mysqlOp.py的文件 阅读全文
posted @ 2018-07-30 17:31 音量 阅读(668) 评论(0) 推荐(0) 编辑
scrapy爬虫保存数据
摘要： 1.数据保存为TXT 打开Pipeline.py 2.保存为json格式 在Pipeline.py里面新建一个类 上面是两种写法，都是一样的 3.保存到mysql 在Pipeline.py里面新建一个类 编写Settings.py 我们需要在Settings.py将我们写好的PIPELINE添加进去 阅读全文
posted @ 2018-07-30 15:29 音量 阅读(257) 评论(0) 推荐(0) 编辑