Could not find or load main class org.apache.spark.deploy.yarn.ApplicationMaster

Spark YARN Cluster mode get this error    

“Could not find or load main class org.apache.spark.deploy.yarn.ApplicationMaster”   

spark.yarn.jars
spark.yarn.archive
配置错误可能会导致此问题

/tmp/spark-80645695-04d9-4801-b119-bf526e903334/__spark_libs__5482901671928622840.zip -> hdfs://WBMLP-cluster/user/feed_weibo/.sparkStaging/application_1512633771221_0309/__spark_libs__5482901671928622840.zip
posted @   澄轶  阅读(5253)  评论(0编辑  收藏  举报
编辑推荐:
· Java 中堆内存和栈内存上的数据分布和特点
· 开发中对象命名的一点思考
· .NET Core内存结构体系(Windows环境)底层原理浅谈
· C# 深度学习:对抗生成网络(GAN)训练头像生成模型
· .NET 适配 HarmonyOS 进展
阅读排行:
· 手把手教你更优雅的享受 DeepSeek
· 腾讯元宝接入 DeepSeek R1 模型,支持深度思考 + 联网搜索,好用不卡机!
· AI工具推荐:领先的开源 AI 代码助手——Continue
· 探秘Transformer系列之(2)---总体架构
· V-Control:一个基于 .NET MAUI 的开箱即用的UI组件库
历史上的今天:
2017-06-21 hadoop 使用ip配置导致hdfs启动失败
点击右上角即可分享
微信分享提示