Spark 分布式环境--连接独立集群管理器
Spark 分布式环境:master,worker 节点都配置好的情况下 :
却无法通过spark-shell连接到 独立集群管理器
spark-shell --master spark://soyo-VPCCB3S1C:7077
问题处理:
原因:因为前期在非分布式情况下使用Spark通过JDBC连接过mysql还有使用过hive等
解决:
cp ./hive-site.xml ./hive-site.xml.template
注释掉以前这些配置,就可以正常连接使用了
【推荐】还在用 ECharts 开发大屏?试试这款永久免费的开源 BI 工具!
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步