2019年11月13日
大数据学习day10-----zookeeper--------1.小文件合并，2 输入和输出 3 多路径输出 4.zookeeper(选举机制，安装，zk的shell客户端、java客户端)
摘要： 1. 小文件合并 HDFS中不适合存储大量的小文件，原因如下; 无论文件大小，namenode记录的元数据大小几乎是一致的（1KB的文件与120M的文件在namenode中的元数据都是一样的） namenode的内存有限，记录的元数据条数有限，集群的存储容量受限，所以HDFS不能无限添加datano 阅读全文
posted @ 2019-11-13 21:38 一y样 阅读(237) 评论(0) 推荐(0) 编辑