摘要：放上一个典型错误 编码错误 1 TypeError: can't concat bytes to str 这段代码错误出现在爬取后没有写入到txt，注释内的是我原来采用的，所以是不需要编码直接写入？编码问题真是玄学... 阅读全文

摘要：前言：EVERNOTE里的一篇笔记，我用了三个博客才学完...真的很菜...百度百科和故事网并没有太过不一样，修改下编码，debug下，就可以爬下来了，不过应该是我爬的东西太初级了，而且我爬到3000多条链接时，好像被拒绝了...爬取速度也很慢，估计之后要接触一些优化或者多进程，毕竟python是假 阅读全文

摘要：前言：为了能以更高效的速度爬取，尝试采用了多线程本博客参照代码及PROJECT来源：http://kexue.fm/archives/4385/ 源代码： 1 #! -*- coding:utf-8 -*- 2 import requests as rq 3 import re 4 import t 阅读全文