会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Time Is Song
博客园
首页
新随笔
联系
订阅
管理
2017年6月16日
scrapy框架的概念
摘要: 使用Scrapy抓取一个网站一共需要四个步骤: 1. 创建一个Scrapy项目; 2. 定义Item容器; 3. 编写爬虫; 4. 存储内容。 下图展现的是Scrapy的架构,包括组件及在系统中发生的数据流(图中绿色箭头)。 下面对每个组件都做了简单介绍: Scrapy Engine Scrapy引
阅读全文
posted @ 2017-06-16 18:02 王毅2016
阅读(221)
评论(0)
推荐(0)
编辑
公告