Lae's Blog

CODE LIFE －－像蚂蚁一样工作，像蝴蝶一样生活

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

2010年12月4日

[转]程序员应知： 海量数据如何分析
摘要： 这个云计算热炒的时代，如果你没有处理过海量数据的话，你将不再是个合格的Coder。现在赶紧补补吧~　　前一阵子分析了一个将近1TB的数据群(gz文件，压缩10%)。因为第一次分析如此巨大的数据，没有经验，所以浪费了许多时间。下面是我整理的一些经验，方便后者。　　下载数据　　Q：怎么自动下载多个文件?　　这是我遇到的第一个问题。当数据量很大时，一般都会分成很多个文件存放。这时下载文件比较麻烦。　　A... 阅读全文
posted @ 2010-12-04 09:29 lae 阅读(428) 评论(1) 推荐(0) 编辑