yarn安装部署
摘要：在HDFS HA(http://www.cnblogs.com/yinchengzhe/p/5140117.html)基础上进行yarn的安装。1、配置yarn-site.xml 参数详情参考http://www.cnblogs.com/yinchengzhe/p/5142659.html 配置...
阅读全文
posted @
2016-01-19 17:16
一寸相思万千劫
阅读(665)
推荐(0) 编辑
Hadoop yarn配置参数
摘要：参照site：http://hadoop.apache.org/docs/r2.6.0/hadoop-yarn/hadoop-yarn-common/yarn-default.xml我们在配置yarn的时候只有充分了解各参数的含义，才能避免隐患。这些参数均在yarn-site.xml中配置 以下涉...
阅读全文
posted @
2016-01-19 16:46
一寸相思万千劫
阅读(24559)
推荐(3) 编辑
yarn的初步理解
摘要：查考site：http://hadoop.apache.org/docs/r2.6.0/hadoop-yarn/hadoop-yarn-site/YARN.htmlyarn结构图如下：1、yarn 下一代的MapReduce系统框架，也称为MRv2(MapReduce version 2), 它是...
阅读全文
posted @
2016-01-19 10:43
一寸相思万千劫
阅读(1066)
推荐(0) 编辑
使用QJM部署HDFS HA集群
摘要：一、所需软件 1. JDK版本 下载地址：http://www.oracle.com/technetwork/java/javase/index.html 版本：jdk-7u79-linux-x64.gz 2. Hadoop软件 下载地址：http://hadoop.apach...
阅读全文
posted @
2016-01-18 18:10
一寸相思万千劫
阅读(790)
推荐(0) 编辑
Hadoop core-site.xml 配置项列表
摘要：core-default.xml与core-site.xml的功能是一样的，如果在core-site.xml里没有配置的属性，则会自动会获取core-default.xml里的相同属性的值官方文档：http://hadoop.apache.org/docs/current/hadoop-projec...
阅读全文
posted @
2015-11-27 11:50
一寸相思万千劫
阅读(10540)
推荐(0) 编辑
Unable to load native-hadoop library解决思路
摘要：最近试着搭建Hadoop，我使用的操作系统是Centos6.5，Hadoop版本是2.6.0。在安装过程中总是出现：WARNutil.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform…usingbuiltin-javac...
阅读全文
posted @
2015-11-24 16:18
一寸相思万千劫
阅读(721)
推荐(0) 编辑
