01 2019 档案
摘要:分享https://blog.csdn.net/zxae86/article/details/45922821
阅读全文
摘要:安装Native Lib 将hadoop-2.0.0+1518-1.cdh4.5.0.p0.24.el6.x86_64.rpm在PC上使用压缩工具打开后,取出\usr\lib\hadoop\lib\native 下面的代码,上传到主机 ${HADOOP_HOME}/lib/native 下面 cd
阅读全文
摘要:一、下载Hadoop 2.6.0-cdh5.7.0的tar.gz包并解压: wget http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.7.0.tar.gz tar -zxvf hadoop-2.6.0-cdh5.7.0.tar.gz
阅读全文
摘要:架构 NameNode:分布式文件系统中的管理者,主要负责管理文件系统的命名空间、集群配置信息和存储块的复制等。NameNode会将文件系统的Meta-data存储在内存中,这些信息主要包括了文件信息、每一个文件对应的文件块的信息和每一个文件块在DataNode的信息等。 SecondaryName
阅读全文
摘要:HDFS数据块:与一般文件系统一样,HDFS也有块(block)的概念,HDFS上的文件也被划分为块大小的多个分块作为独立的存储单元。 与通常的磁盘文件系统不同的是: HDFS中小于一个块大小的文件不会占据整个块的空间(当一个1MB的文件存储在一个128MB的块中时,文件只使用1MB的磁盘空间,而不
阅读全文
摘要:1、安装httpd和php yum install -y httpd yum install -y php 在设定的Directory下新建test.php 加开机自自动chkconfighttpd on service httpd start 浏览器访问http://localhost:port/
阅读全文
摘要:常用的端口配置 2.1 HDFS端口 参数 描述 默认 配置文件 例子值 fs.default.name namenode namenode RPC交互端口 8020 core-site.xml hdfs://master:8020/ dfs.http.address NameNode web管理端
阅读全文
摘要:YARN ResourceManager 8032 yarn.resourcemanager.address RM的applications manager(ASM)端口YARN ResourceManager 8030 yarn.resourcemanager.scheduler.address
阅读全文