会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
年轻人——001
学习从提问一个好问题开始
博客园
首页
新随笔
联系
订阅
管理
2019年2月11日
scrapy抓取企业名录
摘要: 我们要用scrapy抓取企业名录网站的企业信息,并且保存在mysql数据库中,数据大概是22万条,我们用scrapy抓取。 第一步,现在item中定义好要抓取的字段 第二步,定义spider的抓取逻辑。 第三步,在setting里把保存的管道打通。也就是把默认的67,68行被注释的给解开 第四步,在
阅读全文
posted @ 2019-02-11 17:02 年轻人——001
阅读(552)
评论(0)
推荐(0)
编辑
公告