2021年8月5日
爬虫返回403错误解决方案
摘要： 爬虫返回403错误解决方案，处理方法： 在settings.py中添加User-Agent即可。 阅读全文
posted @ 2021-08-05 12:22 有图有派 阅读(243) 评论(0) 推荐(0) 编辑
爬虫出现错误提示:ValueError: Missing scheme in request url: h的解决方案
摘要： 英语提示：ValueError: Missing scheme in request url: h 翻 译：ValueError：请求 url 中缺少方案：h 阅读全文
posted @ 2021-08-05 12:21 有图有派 阅读(324) 评论(0) 推荐(0) 编辑
20210805爬取房天下出现的错误
摘要： 今天爬取的网站是‘房天下’，获取不到下一页列表内容的链接，只获取到了第一个内容列表页的内容，如下图： 经过检查发现，只要把allowed_domains置空就OK了 程序结果： 阅读全文
posted @ 2021-08-05 12:17 有图有派 阅读(47) 评论(0) 推荐(0) 编辑