会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
进无止境
生命的闪耀,不坚持到底怎能看到!
博客园
首页
新随笔
联系
订阅
管理
2017年10月30日
Spark本地运行成功,集群运行空指针异。
摘要: 一个很久之前写的Spark作业,当时运行在local模式下。最近又开始处理这方面数据了,就打包提交集群,结果频频空指针。最开始以为是程序中有null调用了,经过排除发现是继承App导致集群运行时候无法反射获取main方法。 这个问题不难,起始我们也知道提交作业时候不能继承App,源码也看过这一部分,
阅读全文
posted @ 2017-10-30 16:26 bf378
阅读(2411)
评论(0)
推荐(0)
编辑
公告