摘要: Spark工作流程由4个主体联系构成(如上图所示): Application:指用户编写的Spark应用程序,其中包括一个Driver功能的代码和分布在集群中多个节点上运行的Executor代码 Master:主节点,布置作业 Block Tracker用于记录计算数据在Worker节点上的块信息 阅读全文
posted @ 2020-07-01 16:00 藏花半克拉 阅读(2463) 评论(0) 推荐(0) 编辑