2017年4月9日

关于 爬虫使用 urllib.urlopen 提交默认 User-Agent值
摘要： 在爬虫中经常会用到 urllib.request.urlopen(url）来打开网页的操作 比如获取页面状态返回值 问题是urlopen 在GET请求时 发送的User-Agent 上会发送Python urllib的版本，看下面抓包 看一下源码 正常的请求应该是浏览器的 User-Agent 假如 阅读全文
posted @ 2017-04-09 12:38 蓝码骑士 阅读(823) 评论(0) 推荐(0) 编辑

导航