会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
飞起的小田
博客园
首页
新随笔
联系
订阅
管理
2017年10月14日
User-Agent和代理IP
摘要: User-Agent 有一些网站不喜欢被爬虫程序访问,所以会检测连接对象,如果是爬虫程序,也就是非人点击访问,它就会不让你继续访问。 所以为了要让程序可以正常运行,需要隐藏自己的爬虫程序的身份。 此时,我们就可以通过设置User Agent的来达到隐藏身份的目的。 User Agent的中文名为用户
阅读全文
posted @ 2017-10-14 16:00 飞起的小田
阅读(782)
评论(0)
推荐(0)
编辑
公告