2018年7月20日
使用scrapy爬取阳光热线问政平台
摘要： 目的：爬取 "阳光热线问政平台问题反映" 每个帖子里面的标题、内容、编号和帖子url CrawlSpider版流程如下： 1. 创建爬虫项目dongguang 2. 设置items.py文件 3. 在spiders目录里面，创建并编写爬虫文件sun.py 4. 编写管道pipelines.py文件 阅读全文
posted @ 2018-07-20 14:46 silence-cc 阅读(440) 评论(0) 推荐(0) 编辑