天行健,君子以自强不息

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

2015年7月18日

摘要: 安装HUE之后,需要配置很多东西才能将这个系统的功能发挥出来,因为Yarn是配置的HA模式,所以在配置HUE的时候,会有些不用,下面一段文字是官网拿来的 # Configuration for YARN (MR2) # --------------------------------------... 阅读全文
posted @ 2015-07-18 20:58 fgys 阅读(3975) 评论(0) 推荐(0) 编辑

摘要: 机器环境 Ubuntu 14.10 64位 || OpenJDK-7 || Scala-2.10.4 机群概况 Hadoop-2.6.0 || HBase-1.0.0 || Spark-1.2.0 || Zookeeper-3.4.6 || hue-3.8.1 Hue简介(简单介绍): ue是一个开 阅读全文
posted @ 2015-07-18 11:29 fgys 阅读(6921) 评论(0) 推荐(0) 编辑

摘要: 我的Spark机群是部署在Yarn上的,因为之前Yarn的部署只是简单的完全分布式,但是后来升级到HA模式,一个主NN,一个备NN,那么Spark HistoryServer的配置也需要相应的做修改,因为不做修改会报错Exception in thread "main" java.lang.refl... 阅读全文
posted @ 2015-07-18 09:55 fgys 阅读(4302) 评论(0) 推荐(0) 编辑