2017年10月23日

HDFS

摘要: HDFS,Hadoop Distributed File System,即Hadoop分布式文件系统。 当数据集(data set)超过一台独立的物理计算机的储存能力时,就有必要对它进行分区partition,而管理网络中多态计算机储存的系统就是分布式文件系统。 先介绍几个概念: 节点(Node): 阅读全文

posted @ 2017-10-23 20:01 剑姬 阅读(114) 评论(0) 推荐(0) 编辑

linux下hadoop

摘要: 1.hadoop介绍 先来说一下大数据,比如说有个小姐姐爱打麻将,每天都打,我把小姐姐每天麻将的输赢,天气,心情等数据情报搜集起来,就会成为很大量的数据,大家都知道有些人天生就是运气好,从概率学上讲,只要我们每天都压她10块钱赢,是不是就赚了?这种想法是错误的哦,她也许输了99次,一次赢了150,因 阅读全文

posted @ 2017-10-23 18:52 剑姬 阅读(144) 评论(0) 推荐(0) 编辑

导航