2019年7月12日
hdfs的block为什么设置成128M
摘要： 1. 如果块设置过大 从磁盘传输数据的时间会明显大于寻址时间，导致程序在处理这块数据时，变得非常慢； mapreduce中的map任务通常一次只处理一个块中的数据，如果块过大运行速度也会很慢。 2. 如果块设置过小 存放大量小文件会占用NameNode中大量内存来存储元数据，而NameNode的内存 阅读全文
posted @ 2019-07-12 13:50 IsabellaSu 阅读(766) 评论(0) 推荐(0) 编辑