pu369com

再次遇到golang乱码问题,用simplifiedchinese解决

上篇文章中,抓取网页时,本想匹配其中的汉字。由于出现乱码,只好匹配英文绕过了问题。

原因很简单:该网页没指定utf8,默认应该是GBK

解决办法也很简单:引入

"golang.org/x/text/encoding/simplifiedchinese"

比如原来的代码是

resp, err := this.cleint.Get(url)
body, err := ioutil.ReadAll(resp.Body)

此时body中读取到的是乱码。

只需增加一个reader

resp, err := this.cleint.Get(url)
reader := simplifiedchinese.GB18030.NewDecoder().Reader(resp.Body)
body, err := ioutil.ReadAll(reader)

此时,body中就是正确解码后的汉字。可以进行查找或正则匹配了。



posted on 2020-01-22 15:16  pu369com  阅读(3011)  评论(0编辑  收藏  举报

导航