摘要： 想写一个抓取免费代理并验证是否可用得爬虫，写的过程中发现一个问题，某些网站用urll2请求返回乱码，并且把返回数据给beautifulsoup解析不出数据，如果是编码问题导致的乱码肯定不会影响beautifulsoup的解析，所以肯定是其他原因，经过各种百度，谷歌，找到的问题的原因。 一些网站不管你 阅读全文