09 2016 档案

摘要:今天工作中遇到一个问题: 要求对28G的数据排序,数据的格式如下: 要求按时间升序排序 已有的资源为64G内存,32核的服务器一台,需要在一个晚上(8小时)内跑出排序结果。 一个直观的解法就是把数据全部加载进内存,然而实际操作并不可行,才加载了1/10不到的数据就已经使用了接近40G的内存了。 另一 阅读全文
posted @ 2016-09-21 21:16 MindProbe 阅读(4175) 评论(2) 推荐(1) 编辑
摘要:有时候我们需要能够判断一个文件是否正在被其它文件访问,几乎不可避免的要调用操作系统接口 ref: http://stackoverflow.com/questions/8231719/how to check whether a file is open and the open status in 阅读全文
posted @ 2016-09-12 09:09 MindProbe 阅读(6914) 评论(1) 推荐(0) 编辑