01 2019 档案

摘要:分享https://blog.csdn.net/zxae86/article/details/45922821 阅读全文
posted @ 2019-01-14 16:04 zhao525 阅读(134) 评论(0) 推荐(0) 编辑
摘要:安装Native Lib 将hadoop-2.0.0+1518-1.cdh4.5.0.p0.24.el6.x86_64.rpm在PC上使用压缩工具打开后,取出\usr\lib\hadoop\lib\native 下面的代码,上传到主机 ${HADOOP_HOME}/lib/native 下面 cd 阅读全文
posted @ 2019-01-11 09:15 zhao525 阅读(927) 评论(0) 推荐(0) 编辑
摘要:一、下载Hadoop 2.6.0-cdh5.7.0的tar.gz包并解压: wget http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.7.0.tar.gz tar -zxvf hadoop-2.6.0-cdh5.7.0.tar.gz 阅读全文
posted @ 2019-01-10 14:16 zhao525 阅读(378) 评论(1) 推荐(0) 编辑
摘要:架构 NameNode:分布式文件系统中的管理者,主要负责管理文件系统的命名空间、集群配置信息和存储块的复制等。NameNode会将文件系统的Meta-data存储在内存中,这些信息主要包括了文件信息、每一个文件对应的文件块的信息和每一个文件块在DataNode的信息等。 SecondaryName 阅读全文
posted @ 2019-01-08 16:28 zhao525 阅读(908) 评论(0) 推荐(0) 编辑
摘要:HDFS数据块:与一般文件系统一样,HDFS也有块(block)的概念,HDFS上的文件也被划分为块大小的多个分块作为独立的存储单元。 与通常的磁盘文件系统不同的是: HDFS中小于一个块大小的文件不会占据整个块的空间(当一个1MB的文件存储在一个128MB的块中时,文件只使用1MB的磁盘空间,而不 阅读全文
posted @ 2019-01-08 11:36 zhao525 阅读(2721) 评论(0) 推荐(0) 编辑
摘要:1、安装httpd和php yum install -y httpd yum install -y php 在设定的Directory下新建test.php 加开机自自动chkconfighttpd on service httpd start 浏览器访问http://localhost:port/ 阅读全文
posted @ 2019-01-07 14:40 zhao525 阅读(1834) 评论(0) 推荐(0) 编辑
摘要:常用的端口配置 2.1 HDFS端口 参数 描述 默认 配置文件 例子值 fs.default.name namenode namenode RPC交互端口 8020 core-site.xml hdfs://master:8020/ dfs.http.address NameNode web管理端 阅读全文
posted @ 2019-01-02 11:02 zhao525 阅读(19653) 评论(0) 推荐(0) 编辑
摘要:YARN ResourceManager 8032 yarn.resourcemanager.address RM的applications manager(ASM)端口YARN ResourceManager 8030 yarn.resourcemanager.scheduler.address 阅读全文
posted @ 2019-01-02 11:00 zhao525 阅读(2040) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示