会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
love2
I do not know where to go , but I have been on the road .
博客园
首页
新随笔
联系
管理
订阅
2020年3月30日
动态页面获取
摘要: 一、反爬与反反爬 反爬措施(服务器) 通过客户端请求头字段来判断是不是爬虫。 通过在url中拼接加密字段,一般通过js动态生成。 通过判断一个IP在一个时间段内访问频率。 验证码。 不直接在页面中显示数据,通过js进行数据渲染。 反反爬措施(你) 封装常用请求头,列如:user agent,Refe
阅读全文
posted @ 2020-03-30 00:26 叶落西南
阅读(793)
评论(0)
推荐(0)
编辑
公告