摘要: 一、反爬与反反爬 反爬措施(服务器) 通过客户端请求头字段来判断是不是爬虫。 通过在url中拼接加密字段,一般通过js动态生成。 通过判断一个IP在一个时间段内访问频率。 验证码。 不直接在页面中显示数据,通过js进行数据渲染。 反反爬措施(你) 封装常用请求头,列如:user agent,Refe 阅读全文
posted @ 2020-03-30 00:26 叶落西南 阅读(793) 评论(0) 推荐(0) 编辑