摘要:
1.描述spark的安装模式 答:1) 本地模式 2) standalone 模式 3) spark on yarn 模式 4) mesos模式 2.spark有哪些组件,每个组件的作用是什么 答:master:管理集群和节点,不参与计算。 worker:计算节点,进程本身不参与计算,向master 阅读全文
摘要:
1. scala简介 scala是运行在 JVM 上的多范式编程语言,同时支持面向对象和面向函数编程 早期scala刚出现的时候,并没有怎么引起重视,随着Spark和Kafka这样基于scala的大数据框架的兴起,scala逐步进入大数据开发者的眼帘。scala的主要优势是它的表达性。 官网地址 h 阅读全文