随笔分类 - Spark

Spark on Yarn运行机制

摘要：一、Spark 相关术语 Driver（通常用 SparkContext 代表 Drive）：表示运行 Application的main() 函数，并创建 SparkContext。其中创建 SparkContext 的目的是为了准备 Spark 应用程序的运行环境。在 Spark 中由 Spark 阅读全文

posted @ 2021-07-23 13:05 民宿阅读(299) 评论(0) 推荐(0) 编辑