爬取网页时,出现json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)错误

最近在学习Django时,进行网站爬取资源训练时,出现错误

 

 1.错误原因分析

我的代码如图

 

在网上找了很多资料之后,发现好像是网站设置了防火墙啥的,不能直接通过URL进行数据的爬取

2.解决办法

①首先找到爬取网站的URL,如图

 

 ②并查询该网站的User-Agent,向下查找,就可以看见User-Agent的相关信息,如图

 

 ③将②中查询的结果添加到代码里面,在get函数里面添加headers参数,如图

 

 爬取到了数据。

 

 最后问题成功解决!!!

posted @   tuyin  阅读(693)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 震惊!C++程序真的从main开始吗?99%的程序员都答错了
· 【硬核科普】Trae如何「偷看」你的代码?零基础破解AI编程运行原理
· 单元测试从入门到精通
· 上周热点回顾(3.3-3.9)
· winform 绘制太阳,地球,月球 运作规律
点击右上角即可分享
微信分享提示