寒假生活（StandAlone总结）

合集 - 寒假生活(23)

1.寒假生活(spark的运行角色)2024-01-112.寒假生活（spark基础总结）2024-01-123.寒假生活2024-01-134.寒假生活(spark的 Standalone 架构)2024-01-215.寒假生活（Spark程序运行层次结构）2024-01-31

6.寒假生活（StandAlone总结）2024-01-29

7.寒假生活（StandAlone HA的原理总结）2024-02-028.寒假生活2024-02-039.寒假生活2024-01-3010.寒假生活2024-02-0411.寒假生活2024-02-0112.寒假生活，2024-02-0513.寒假生活2024-01-1514.寒假生活2024-01-1615.寒假生活2024-01-1816.寒假生活2024-01-1817.寒假生活(Selenium 的基本使用)2024-01-1918.寒假生活2024-01-2019.寒假生活2024-01-2220.寒假生活2024-01-2321.寒假生活2024-01-2422.寒假生活2024-01-2423.寒假生活2024-01-25

收起

StandAlone的原理?

Master和Worker角色以独立进程的形式存在,并组成Spark运行时环境(集群)

Spark角色在StandAlone中的分布？

Master角色:Master进程, Worker角色:Worker进程, Driver角色和Executor角色: 以线程运行在Worker中

Standalone如何提交Spark应用？ bin/spark-submit --master spark://server:7077

Job\State\Task的关系?

一个Spark程序会被分成多个子任务(Job)运行, 每一个Job会分成多个State(阶段)来 运行, 每一个State内会分出来多个Task(线程)来执行具体任务