2017年12月29日
Spark 参数配置的几种方法
摘要： 1.Spark 属性Spark应用程序的运行是通过外部参数来控制的，参数的设置正确与否，好与坏会直接影响应用程序的性能，也就影响我们整个集群的性能。参数控制有以下方式：（1）直接设置在SparkConf，通过参数的形式传递给SparkContext，达到控制目的。（通过set()方法传入key-va 阅读全文
posted @ 2017-12-29 09:42 那一抹风 阅读(17116) 评论(0) 推荐(1) 编辑