会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
DoubleFishes
博客园
首页
新随笔
联系
管理
订阅
2019年3月23日
python爬虫之Scrapy框架
摘要: Scrapy是用python实现的一个为了爬取网站数据,提取结构性数据而编写的应用框架。使用Twisted高效异步网络框架来处理网络通信。 Scrapy架构: ScrapyEngine:引擎。负责控制数据流在系统中所有组件中流动,并在相应动作发生时触发事件。 此组件相当于爬虫的“大脑”,是 整个爬虫
阅读全文
posted @ 2019-03-23 21:18 DoubleFishes
阅读(28102)
评论(4)
推荐(6)
编辑
公告