scrapy 爬取图片，数据没有下载下来， [scrapy.pipelines.files] WARNING: File (code: 301): Error downloading file from <GET

问题描述：

scrapy 爬取图片，数据没有下载下来，出现如下错误日志

2021-01-29 09:06:54 [scrapy.pipelines.files] WARNING: File (code: 301): Error downloading file from <GET http://scpic.chinaz.net/Files/pic/pic9/202101/apic30448_s.jpg> referred in <None>

问题解决

在settings文件中 设置 MEDIA_ALLOW_REDIRECTS =True 问题完美解决！！

posted @   技术研究与问题解决  阅读(1184)  评论(0)  编辑  收藏  举报
编辑推荐：
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语，封装的思维：从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热？
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列：向量存储与相似性搜索在 .NET 中的实现
阅读排行：
· 地球OL攻略 —— 某应届生求职总结
· 周边上新：园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源！
· 提示词工程——AI应用必不可少的技术
· .NET周刊【3月第1期 2025-03-02】
点击右上角即可分享
微信分享提示
AI IDE Trae