2021年1月14日
spark设置检查点 使用ip访问hdfs 被拒绝连接
摘要： 在设置检查点的时候一开始的写法是这样的： spark.sparkContext.setCheckpointDir('/checkPoint') 提示路径明显为本地路径，请改为hdfs路径，于是显式的写成： spark.sparkContext.setCheckpointDir('hdfs://192 阅读全文
posted @ 2021-01-14 19:04 风和雨滴 阅读(674) 评论(0) 推荐(0) 编辑