摘要: 因采集需求,想解决网页编码识别问题。网上提出了很多方法。比如根据文件头字节判断,或根据网页的charset标识符判断。我在实际应用中,这些方法都有各自的不足,比如有的网页charset写的是gbk,但实际是utf8。于是想了一个个人认为比较新鲜的方法。将html下载回来后,做一份utf8副本和一份g... 阅读全文
posted @ 2015-11-09 09:56 落叶与尘埃 阅读(930) 评论(0) 推荐(0) 编辑