摘要: 前言 前面一篇介绍了Java怎么去查看数据块的相关信息和怎么去查看文件系统。我们只要知道怎么去查看就行了!接下来我分享的是Hadoop的I/O操作。 在Hadoop中为什么要去使用压缩(Compression)呢?接下来我们就知道了。 一、压缩(Compression)概述 1.1、压缩的好处 减少 阅读全文
posted @ 2017-10-20 13:57 华仔Coding 阅读(4698) 评论(0) 推荐(2) 编辑
摘要: 一、HashMap简介 1.1、HashMap概述 HashMap是基于哈希表的Map接口实现的,它存储的是内容是键值对<key,value>映射。此类不保证映射的顺序,假定哈希函数将元素适当的分布在各桶之间,可为基本操作(get和put)提供稳定的性能。 在API中给出了相应的定义: //1、哈希 阅读全文
posted @ 2017-10-20 11:34 华仔Coding 阅读(6494) 评论(5) 推荐(7) 编辑
摘要: 前言 我们知道HDFS集群中,所有的文件都是存放在DN的数据块中的。那我们该怎么去查看数据块的相关属性的呢?这就是我今天分享的内容了 一、HDFS中数据块概述 1.1、HDFS集群中数据块存放位置 我们知道hadoop集群遵循的是主/从的架构,namenode很多时候都不作为文件的读写操作,只负责任 阅读全文
posted @ 2017-10-20 09:52 华仔Coding 阅读(7208) 评论(0) 推荐(0) 编辑
levels of contents