spark-shell报错java.lang.IllegalArgumentException: java.net.UnknownHostException: namenode

在使用spark on yarn启动spark-shell时，发现报错：

是说找不到主机名为namenode的主机，那么应该是配置文件出错了。

经过检查，发现是spark-defaults.conf文件配置错误，配置的时候直接将上面复制了下来，导致忘了修改为node1，所以配置时一定要细心

更改后完美解决

 

 

 

最近老是犯低级错误，难受🤦‍

posted @   睡觉不困  阅读(1554)  评论(0)  编辑  收藏  举报
相关博文：
·  Idea运行时Scala报错Exception in thread "main" java.lang.NoSuchMethodError:com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V
·  解决HDFS无法启动namenode，报错Premature EOF from inputStream；Failed to load FSImage file, see error(s) above for more info
·  spark_(spark for windows)spark_shell.cmd启动失败ಥ_ಥ/关闭java8更新提示
·  idea创建Spark项目报错记录
·  spark在windows环境下执行spark-shell失败 提示找不到路径
阅读排行：
· 10年+ .NET Coder 心语 ── 封装的思维：从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 周边上新：园子的第一款马克杯温暖上架
· 提示词工程——AI应用必不可少的技术
· Open-Sora 2.0 重磅开源！
点击右上角即可分享
微信分享提示
SQL AI 助手