会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
ljw不想加班
博客园
首页
博问
闪存
新随笔
订阅
管理
2017年9月11日
webmagic爬取渲染网站
摘要: 最近突然得知之后的工作有很多数据采集的任务,有朋友推荐webmagic这个项目,就上手玩了下。发现这个爬虫项目还是挺好用,爬取静态网站几乎不用自己写什么代码(当然是小型爬虫了~~|)。好了,废话少说,以此随笔记录一下渲染网页的爬取过程首先找到一个js渲染的网站,这里直接拿了学习文档里面给的一个网址,
阅读全文
posted @ 2017-09-11 16:41 ljw不想加班
阅读(3733)
评论(3)
推荐(0)
编辑