spark的运行模式

1.local(本地模式)

单机模式,通常用来测试

将spark应用以多线程方式,直接运行在本地

本地模式可以启动多个executor不过上限不能超过cpu数

2.standalone(独立模式)

独立运行在一个集群上

由master和slave组成控制executor的运行

3.YARN

运行在资源管理系统上,

由resourcemanager和nodemanager组成控制executor的运行

 

posted @ 2019-03-15 13:29  想不到8  阅读(176)  评论(0编辑  收藏  举报