2022年5月15日
多个NameNode的HDFS集群切换HA后，Spark应用变得很慢的处理办法
摘要： Spark客户端需要依次轮询到Active NameNode才能正确执行。 查看hdfs-site.xml配置，配置在hdfs-site.xml中的FailoverProxyProvider接口为ConfiguredFailoverProxyProvider。源码实现为：从hdfs-site.xml 阅读全文
posted @ 2022-05-15 09:55 斜杠代码日记 阅读(211) 评论(0) 推荐(0) 编辑