摘要: Shell命令选项 Shell常用命令 - - ls 使用方法:hadoop fs -ls [-h] [-R] <args> 功能:显示文件、目录信息。 示例:hadoop fs -ls /user/hadoop/file1 - - mkdir 使用方法:hadoop fs -mkdir [-p] 阅读全文
posted @ 2018-07-04 22:32 jiFeng丶 阅读(323) 评论(0) 推荐(1) 编辑
摘要: 首先,它是一个文件系统,用于存储文件,通过统一的命名空间目录树来定位文件; 其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。 1. master/slave 架构 HDFS 采用 master/slave 架构。一般一个 HDFS 集群是有一个 Namenode 和一 阅读全文
posted @ 2018-07-04 22:21 jiFeng丶 阅读(1140) 评论(1) 推荐(0) 编辑
摘要: 一、集群简介 HADOOP 集群具体来说包含两个集群:HDFS 集群和 YARN 集群,两者逻辑上分离,但物理上常在一起。 HDFS 集群负责海量数据的存储,集群中的角色主要有: NameNode、DataNode、SecondaryNameNode YARN 集群负责海量数据运算时的资源调度,集群 阅读全文
posted @ 2018-07-04 21:23 jiFeng丶 阅读(427) 评论(0) 推荐(0) 编辑
摘要: 一、原理分析与设计实现 友情链接:https://www.cnblogs.com/likemebee/p/7967534.html 二、系统环境部署 !!!执行复制下列命令是注意查看是否为英文类型的 “-” ,当命令错误时首先排查该处 服务器 A 中部署开始 需要的安装包 服务器中安装依赖 上传 L 阅读全文
posted @ 2018-07-04 18:21 jiFeng丶 阅读(1550) 评论(0) 推荐(0) 编辑
摘要: org.apache.zookeeper.Zookeeper Zookeeper 是在 Java 中客户端主类,负责建立与 zookeeper 集群的会话,并提供方法进行操作。 org.apache.zookeeper.Watcher Watcher 接口表示一个标准的事件处理器,其定义了事件通知相 阅读全文
posted @ 2018-07-04 16:37 jiFeng丶 阅读(212) 评论(0) 推荐(0) 编辑
摘要: 一、启动zookeeper集群 进入zookeeper安装目录下的bin目录内,通过命令启动 通过命令查看节点状态 通过命令关闭 二、连接zookeeper服务 启动zookeeper服务之后,输入以下命令,连接到Zookeeper服务,注意:如果没有配置环境变量在zookeeper的安装目录下的b 阅读全文
posted @ 2018-07-04 16:17 jiFeng丶 阅读(5931) 评论(2) 推荐(0) 编辑