2018年5月15日
Scrapy爬虫框架补充内容三(代理及其基本原理介绍)
摘要： 前言：（本文参考维基百科及百度百科所写） 当我们使用爬虫抓取数据时，有时会产生错误比如：突然跳出来了403 Forbidden 或者网页上出现以下提示：您的ip访问频率太高 或者时不时跳出一个验证码需要你输入，这是由于网站采取了反爬虫措施：服务器会检查某个固定的ip在单位时间内请求的次数，如果发现请 阅读全文
posted @ 2018-05-15 18:44 疾风_lu 阅读(1023) 评论(0) 推荐(0) 编辑