2020年7月1日
Spark 源码解读（三）SparkContext的初始化之Hadoop相关配置及Executor环境变量
摘要： Spark 源码解读（三）SparkContext的初始化之Hadoop相关配置及Executor环境变量 Hadoop相关配置信息 默认情况下，Spark使用HDFS作为分布式文件系统，所以需要获取Hadoop相关配置信息。 代码如下： _hadoopConfiguration = SparkHa 阅读全文
posted @ 2020-07-01 23:38 这个小仙女真可爱 阅读(727) 评论(0) 推荐(0) 编辑