spark-shell报错java.lang.IllegalArgumentException: java.net.UnknownHostException: namenode
在使用spark on yarn启动spark-shell时,发现报错:
是说找不到主机名为namenode的主机,那么应该是配置文件出错了。
经过检查,发现是spark-defaults.conf文件配置错误,配置的时候直接将上面复制了下来,导致忘了修改为node1,所以配置时一定要细心
更改后完美解决
最近老是犯低级错误,难受🤦