摘要: HDFS处理文件的命令和Linux命令差不多,但注意区分大小写。 (Linux区分大小写,Windows不区分大小写) 一、fs命令 键入命令“./bin/hadoop fs”将输出能够支持的命令列表。 Usage: java FsShell [-ls ] [-lsr ]... 阅读全文
posted @ 2014-09-22 22:26 DianaCody 阅读(358) 评论(0) 推荐(0) 编辑
摘要: HA解决了HDFS的NameNode的单点问题; Federation解决了整个HDFS集群中只有一个名字空间,并且只有单独的一个NameNode管理所有DataNode的问题。 一、HA机制(High Availability) 1.HA集群 HDFS 的高可用性(... 阅读全文
posted @ 2014-09-22 19:59 DianaCody 阅读(1246) 评论(0) 推荐(0) 编辑
摘要: RPC(Remote Procedure Call, 远程过程调用)主要面对两个问题: 1.对象调用方式; 2.序列/反序列化机制。 Hadoop实现的RPC组件依赖于Hadoop Writable类型支持。Writable接口要求... 阅读全文
posted @ 2014-09-22 18:30 DianaCody 阅读(641) 评论(0) 推荐(0) 编辑