python抓去网页一部分

  1. import sys, urllib2  
  2.   
  3.   
  4. headers = {'User-Agent':'Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6'} //设置代理  
  5. req = urllib2.Request("http://blog.csdn.net/nevasun", headers=headers)  
  6. content = urllib2.urlopen(req).read()  
  7.   
  8. type = sys.getfilesystemencoding()      
  9. print content.decode("UTF-8").encode(type)  # 编码格式
posted @ 2017-01-05 10:05  Beeman_xia  阅读(132)  评论(0)  编辑  收藏  举报