Python 爬虫 处理429错误
http代码429表示访问过快。
服务器在温柔地提示你,可以爬,但是爬慢一些。
控制访问的速度就可以了。
①
有些服务器会在返回的头部中添加"Retry-After",告诉你多久之后重试。
获取这个值,然后sleep就可以了。
or
②
(通用)使用while循环,通过判断status返回值是否不等于429,设置一定睡眠时间就行啦。
分类:
Python学习
http代码429表示访问过快。
服务器在温柔地提示你,可以爬,但是爬慢一些。
控制访问的速度就可以了。
①
有些服务器会在返回的头部中添加"Retry-After",告诉你多久之后重试。
获取这个值,然后sleep就可以了。
or
②
(通用)使用while循环,通过判断status返回值是否不等于429,设置一定睡眠时间就行啦。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· 物流快递公司核心技术能力-地址解析分单基础技术分享
· .NET 10首个预览版发布:重大改进与新特性概览!