2017年6月20日
hdfs文件系统架构详解
摘要： hdfs文件系统架构详解 "官方hdfs分布式介绍" NameNode Namenode负责文件系统的namespace以及客户端文件访问 NameNode负责文件元数据操作，DataNode负责文件内容的处理，跟文件有关的额数据不会经过NameNode NameNode负责安排数据存在那台机器上， 阅读全文
posted @ 2017-06-20 17:38 岑忠满 阅读(518) 评论(0) 推荐(0) 编辑
Hadoop各种进程的配置文件及其位置说明
摘要： hdfs DameNode core site.xml <! 设置主机的IP和端口 fs.defaultFS hdfs://cen ubuntu:8020 DataNode slaves cen ubuntu SecondaryNameNode hdfs site.xml dfs.namenode. 阅读全文
posted @ 2017-06-20 08:02 岑忠满 阅读(1181) 评论(0) 推荐(0) 编辑
SSH无密码登录及远程拷贝命令SCP的使用
摘要： SSH无密码登录 1.生成密钥对（公钥和私钥） $ cd /home/cen/.ssh $ ssh keygen t rsa 生成密钥，使用rsa方式进行加密，四个回车 $ ssh copy id hostname 复制公钥密钥 原理，通过私钥与公钥的匹配能够唯一地确定一台机器，使得自己的身份得以确 阅读全文
posted @ 2017-06-20 07:42 岑忠满 阅读(446) 评论(0) 推荐(0) 编辑
Hadoop启动方式
摘要： 启动方式 1.逐一启动 hdfs hadoop daemon.sh start|stop namenode|datanode|secondrynamenode yarn yarn daemon.sh start|stop resourcemanager|nodemanager mapreduce m 阅读全文
posted @ 2017-06-20 07:41 岑忠满 阅读(547) 评论(0) 推荐(0) 编辑