Python requests库中文乱码问题汇总(编码)

Python requests库中文乱码问题汇总(编码)

 

在用requests爬取网页时,经常会碰到网页的编码问题导致中文乱码

<dt>特色服务</dt>

这时首先查看页面源代码,看meta标签里的编码是什么,然后设置成相应的编码即可


    response.encoding = 'utf-8'  # 设置编码

但有的时候设置meta标签查看的编码依然乱码,这是可以使用apparent_encoding查看真实编码

response.apparent_encoding

然后设置编码

 response.encoding = 'utf-8'  # 设置编码

还有一种特殊情况,获得的编码是gb2312,这是设置编码为gb2312依然会乱码。

这是因为gb2312支持的汉字较gbk要少很多,所以有些gb2312的网页实际需要用gbk解码。

 

posted @ 2019-05-31 16:47  IMWU  阅读(6702)  评论(0编辑  收藏  举报