摘要: 解决办法是 import requests,json,timerequests.packages.urllib3.disable_warnings()requests.adapters.DEFAULT_RETRIES = 5 #增加重连次数def get_price(url): headers = 阅读全文
posted @ 2019-07-10 15:52 乔儿 阅读(5364) 评论(0) 推荐(0) 编辑
摘要: 在使用scrapy抓取微博的话题时,抓取到了一个中文字段(用变量a表示),无论使用何种编码方式都无法正确显示,如下所示: 查看a的编码后,确认是unicode编码,具体值如下所示: 直接print a结果为乱码,将a encode之后,结果仍未乱码: 并且我们发现a.encode('utf-8')之 阅读全文
posted @ 2019-07-10 15:49 乔儿 阅读(4157) 评论(0) 推荐(0) 编辑