摘要: 基于scrapy框架的爬影评 爬虫主程序: items 对象 pipelines 输出管道 在控制台输出的结果 可以通过爬出的图片链接,下载电影的剧照,这就另说了,也可以设置一个插入数据库的管道,将这些数据插入到数据库中 阅读全文
posted @ 2018-09-29 09:01 雨轩恋i 阅读(1633) 评论(0) 推荐(0) 编辑
摘要: 今天老师讲解了Python中的爬虫框架--scrapy,然后带领我们做了一个小爬虫--爬取51job网的职位信息,并且保存到数据库中 用的是Python3.6 pycharm编辑器 爬虫主体: items.py 设置五个items pipelines.py 输出管道 pipelinesmysql.p 阅读全文
posted @ 2018-09-29 08:36 雨轩恋i 阅读(2099) 评论(0) 推荐(0) 编辑