会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
amchen
博客园
首页
新随笔
联系
订阅
管理
2017年6月12日
python+selenium+PhantomJS爬取网页动态加载内容
摘要: 一般我们使用python的第三方库requests及框架scrapy来爬取网上的资源,但是设计javascript渲染的页面却不能抓取,此时,我们使用web自动化测试化工具Selenium+无界面浏览器PhantomJS来抓取javascript渲染的页面,下面实现一个简单的爬取 环境搭建 准备工具
阅读全文
posted @ 2017-06-12 17:34 amchen
阅读(22051)
评论(0)
推荐(0)
编辑
公告