忧伤的南瓜

摘要： 1. 前言 mongodb文档中存储一节中关于磁盘空间回收的说明，简单处理、备注记于此。标号为另加，原文档见：https://docs.mongodb.com/v3.2/faq/storage/ 2. Why are the files in my data directory larger tha 阅读全文

摘要： 背景 爬虫单位时间内请求数多，对己方机器、对方服务器都会形成压力，如果每个请求都开启一个新连接，更是如此；如果服务器支持keep alive，爬虫就可以通过多个请求共用一个连接实现“减员增效”：单位时间内新建、关闭的连接的数目少了，但可实现的有效请求多了，并且也能有效降低给目标服务器造成的压力。 k 阅读全文