会员
周边
捐助
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Coder-Wang
博客园
首页
新随笔
联系
订阅
管理
2021年9月3日
webmagic
摘要: webmagic框架是一个java实现的爬虫框架,底层依然是Httpclient和jsoup 四大组件了解 downloader:下载器组件 PageProcessor:页面解析组件(必须自定义) scheduler:访问队列组件 pipeline:数据持久化组件(默认输出到控制台) 入门程序 流程
阅读全文
posted @ 2021-09-03 00:36 Coder-Wang
阅读(300)
评论(0)
推荐(0)
编辑
公告