2018年10月22日

spark on yarn模式下内存资源管理(笔记2)

摘要: 1.spark 2.2内存占用计算公式 https://blog.csdn.net/lingbo229/article/details/80914283 2.spark on yarn内存分配** 本文转自:http://blog.javachen.com/2015/06/09/memory-in- 阅读全文

posted @ 2018-10-22 22:56 moonlight.ml 阅读(799) 评论(0) 推荐(0) 编辑

spark on yarn模式下内存资源管理(笔记1)

摘要: 问题:1. spark中yarn集群资源管理器,container资源容器与集群各节点node,spark应用(application),spark作业(job),阶段(stage),任务(task)之间的关系。2. 在yarn集群资源管理器下,提交一个spark应用之后,经过怎样的资源分配,最后为 阅读全文

posted @ 2018-10-22 22:48 moonlight.ml 阅读(917) 评论(1) 推荐(1) 编辑

面试题10.3-变态跳台阶

摘要: 题目 一只青蛙一次可以跳上1级台阶,也可以跳上2级……它也可以跳上n级。求该青蛙跳上一个n级的台阶总共有多少种跳法。 代码 阅读全文

posted @ 2018-10-22 00:43 moonlight.ml 阅读(99) 评论(0) 推荐(0) 编辑

面试题10.2-青蛙跳

摘要: 题目一只青蛙一次可以跳上1级台阶,也可以跳上2级。求该青蛙跳上一个n级的台阶总共有多少种跳法(先后次序不同算不同的结果)。 代码 阅读全文

posted @ 2018-10-22 00:14 moonlight.ml 阅读(146) 评论(0) 推荐(0) 编辑

导航