会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
RZ_Lee
积累点滴,终成大器
博客园
首页
新随笔
联系
订阅
管理
2017年9月27日
Spark- Spark Yarn模式下跑yarn-client无法初始化SparkConext,Over usage of virtual memory
摘要: 在spark yarn模式下跑yarn-client时出现无法初始化SparkContext错误. jdk1.7的时候,没有如下报错,但是java1.8出现 原因可能与yarn配置文件中 containers 的默认属性有关,被强制限定了物理内存 可以尝试中hadoop的conf下yarn.xml配
阅读全文
posted @ 2017-09-27 18:01 RZ_Lee
阅读(2194)
评论(0)
推荐(0)
编辑
公告