文章分类 -  大数据

摘要:排查错误 hdfs.protocol.BlockStoragePolicy: Failed to place enough replicas: expected size is 1 but only 0 storage types can be selected 此类错误,客户端和服务端都需要排查 阅读全文
posted @ 2022-12-20 19:34 szcj~ 阅读(65) 评论(0) 推荐(0) 编辑
摘要:docker 单节点版本安装 参考 https://registry.hub.docker.com/r/pravega/hdfs 执行 docker run -p 22022:22 -p 8020:8020 -p 50010:50010 -p 50020:50020 -p 50070:50070 - 阅读全文
posted @ 2022-12-19 20:27 szcj~ 阅读(249) 评论(0) 推荐(0) 编辑
摘要:ds简介 DolphinScheduler 是一个分布式,易扩展的可视化 DAG(有向无环图图)工作流任务调度平台。致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。 有以下主要特点: 用于大数据处理,大数据工作流调度。 以DAG图的方式,将任务按照依赖关系串联起来。 阅读全文
posted @ 2022-10-08 22:36 szcj~ 阅读(434) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示