会员
商店
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
amchen
博客园
首页
新随笔
联系
订阅
管理
06 2017 档案
python+selenium+PhantomJS爬取网页动态加载内容
摘要:一般我们使用python的第三方库requests及框架scrapy来爬取网上的资源,但是设计javascript渲染的页面却不能抓取,此时,我们使用web自动化测试化工具Selenium+无界面浏览器PhantomJS来抓取javascript渲染的页面,下面实现一个简单的爬取 环境搭建 准备工具
阅读全文
posted @
2017-06-12 17:34
amchen
阅读(22054)
评论(0)
推荐(0)
编辑
公告
点击右上角即可分享