随笔分类 - hadoop学习
摘要：错误信息：there is no HDFS_SECONDARYNAMENODE_USER defined. Aborting operation. 解决方案： （缺少用户定义而造成的）因此编辑启动和关闭 注意是在文件开始空白处 在/hadoop/sbin路径下： 将start-dfs.sh，stop
阅读全文
摘要：1． Hadoop安装包目录结构 bin：Hadoop最基本的管理脚本和使用脚本的目录，这些脚本是sbin目录下管理脚本的基础实现，用户可以直接使用这些脚本管理和使用Hadoop。 etc：Hadoop配置文件所在的目录，包括core-site,xml、hdfs-site.xml、mapred-si
阅读全文
摘要：1． 集群简介 HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起。 HDFS集群负责海量数据的存储，集群中的角色主要有： NameNode、DataNode、SecondaryNameNode YARN集群负责海量数据运算时的资源调度，集群中的角色主
阅读全文
