会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
不要忘记我
博客园
首页
新随笔
联系
订阅
管理
2020年2月9日
python Scrapy框架
摘要: scrapy框架1.scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架,使用了Twisted(扭曲)异步网络框架,可以加快下载是速度。同步异步(过程) 阻塞非阻塞(状态) 2.工作流程:scheduler(调度器)里面存放request对象,这个对象里有url地址scrapy eng
阅读全文
posted @ 2020-02-09 20:50 啥123
阅读(149)
评论(0)
推荐(0)
编辑