摘要: 1.描述spark的安装模式 答:1) 本地模式 2) standalone 模式 3) spark on yarn 模式 4) mesos模式 2.spark有哪些组件,每个组件的作用是什么 答:master:管理集群和节点,不参与计算。 worker:计算节点,进程本身不参与计算,向master 阅读全文
posted @ 2019-10-04 21:25 小码农成长记 阅读(176) 评论(0) 推荐(0) 编辑
摘要: 1. scala简介 scala是运行在 JVM 上的多范式编程语言,同时支持面向对象和面向函数编程 早期scala刚出现的时候,并没有怎么引起重视,随着Spark和Kafka这样基于scala的大数据框架的兴起,scala逐步进入大数据开发者的眼帘。scala的主要优势是它的表达性。 官网地址 h 阅读全文
posted @ 2019-10-04 20:32 小码农成长记 阅读(447) 评论(0) 推荐(0) 编辑