2014年10月13日
Spark1.0.0属性配置
摘要： 1：Spark1.0.0属性配置方式 Spark属性提供了大部分应用程序的控制项，并且可以单独为每个应用程序进行配置。 在Spark1.0.0提供了3种方式的属性配置：SparkConf方式SparkConf方式可以直接将属性值传递到SparkContext；SparkConf可以对某些通用... 阅读全文
posted @ 2014-10-13 21:17 谭志宇 阅读(6230) 评论(0) 推荐(0) 编辑
yarn默认配置
摘要： namevaluedescriptionyarn.ipc.client.factory.classFactory to create client IPC classes.yarn.ipc.serializer.typeprotocolbuffersType of serialization to ... 阅读全文
posted @ 2014-10-13 21:04 谭志宇 阅读(12997) 评论(0) 推荐(0) 编辑
spark安装
摘要： 1 安装参考 http://www.kankanews.com/ICkengine/archives/106212.shtml 1.1 安装scala wget http://www.scala-lang.org/files/archive/scala-2.9.3.tgz exp... 阅读全文
posted @ 2014-10-13 20:42 谭志宇 阅读(215) 评论(0) 推荐(0) 编辑