2017年4月25日
JAVA爬虫实践（实践四：webMagic和phantomjs和淘宝爬虫）
摘要： webMagic虽然方便，但是也有它不适用的地方，比如定向的某个单页面爬虫，或者存在大量ajax请求，页面的跳转请求全都混淆在js里。 这时可以用webMagic结合phantomjs来真实模拟页面请求，即不仅仅获取数据，而是将整个页面完整渲染出来。虽然这样会使爬虫速度变慢很多，但是不失为一种快捷方 阅读全文
posted @ 2017-04-25 09:39 灼眼的健 阅读(1019) 评论(0) 推荐(0) 编辑