java爬虫爬取的html内容中空格( )变为问号“?”的解决方法
用java编写的爬虫,使用xpath爬取内容后,发现网页源码中的 全部显示为?(问号),但是使用字符串的replace("?", ""),并不能替换,网上找了一下,大概意思是显示的这个问号其实并不是问号,是乱码,主要是由于编码的问题导致的。
解决方法如下:
//替换抓取内容中“ ”变为问号的问题 try { intro = new String(intro.getBytes(),"GBK").replace('?', ' ').replace(' ', ' '); } catch (Exception e){ e.printStackTrace(); }
其中replace(' ', ' ')中,前面哪一个空格是全角空格。
参考链接:
http://bbs.csdn.net/topics/360072952