摘要: 1.爬取58同城租房网遇到的坑:我爬了一页数据被封了ip,此时的我是非常的不爽,才十几条数据就封我,于是我就想着一定得找ip代理来解决这个问题,后面就写了个ip代理去弄,另外把之前头部信息ua改成了ua池,然后再爬取58同城,瞬间爬到了数据。头部信息如下: 爬取58成功搞定 2.爬取大众点评景点名称 阅读全文
posted @ 2018-04-20 16:58 那时的吻狠陶醉 阅读(2649) 评论(1) 推荐(0) 编辑
摘要: 加上decode()就可以。 举个例子: 不加就成了\xe7\x99\xbe\xe5\xba\xa6\xe6\x90\x9c\xe7\xb4\xa2这样的字符 阅读全文
posted @ 2018-04-20 11:00 那时的吻狠陶醉 阅读(7119) 评论(0) 推荐(0) 编辑