摘要: 当用多线程爬取某个网站的数据的时候,爬取一段时间后,总出现urlopen error [errno 10060]的错误,结果线程无端的被挂掉,一开始的解决思路是每次连接的时候换用不同的useragent,结果还是出现这种问题,在网上查了下,看到网上别人的经验,原来是 如果用多个线程爬去某个网站的数据 阅读全文
posted @ 2017-07-21 11:15 子非鱼° 阅读(4933) 评论(0) 推荐(0) 编辑