摘要: 注重版权,尊重他人劳动转帖注明原文地址:http://www.cnblogs.com/vincent-hv/p/3316502.htmlSpark主要提供三种位置配置系统:环境变量:用来启动Spark workers,可以设置在你的驱动程序或者conf/spark-env.sh 脚本中;java系统性能:可以控制内部的配置参数,两种设置方法:编程的方式(程序中在创建SparkContext之前,使用System.setProperty(“xx”,“xxx”)语句设置相应系统属性值);在conf/spark-env.sh中配置环境变量SPARK_JAVA_OPTS。日志配置:通过log4j.pr 阅读全文
posted @ 2013-09-12 11:20 vincent_hv 阅读(8015) 评论(0) 推荐(0) 编辑