随笔分类 -  hadoop

大数据
摘要:Hbase表中的每个列,都归属与某个列族。列族是表的chema的一部分(而列不是),必须在使用表之前定义。列名都以列族作为前缀。例如courses:history,courses:math 都属于courses 这个列族。访问控制、磁盘和内存的使用统计都是在列族层面进行的。实际应用中,列族上的控制权限能帮助我们管理不同类型的应用:我们允许一些应用可以添加新的基本数据、一些应用可以读取基本数据并创建继承的列族、一些应用则只允许浏览数据(甚至可能因为隐私的原因不能浏览所有数据)。 阅读全文
posted @ 2019-09-01 13:47 小禾点点 阅读(1073) 评论(0) 推荐(0) 编辑
摘要:NameNode并不会将文件的分块数据持久化存储,这些信息会在HDFS启动时由各个dataNode上报过来。他把这些数据存入内存中。并且会定时对内存中的数据进行快照。所以对于NameNode节点的机器内存应该大一些 阅读全文
posted @ 2019-08-03 14:58 小禾点点 阅读(5198) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示