文章分类 - 大数据
摘要:排查错误 hdfs.protocol.BlockStoragePolicy: Failed to place enough replicas: expected size is 1 but only 0 storage types can be selected 此类错误,客户端和服务端都需要排查
阅读全文
摘要:docker 单节点版本安装 参考 https://registry.hub.docker.com/r/pravega/hdfs 执行 docker run -p 22022:22 -p 8020:8020 -p 50010:50010 -p 50020:50020 -p 50070:50070 -
阅读全文
摘要:ds简介 DolphinScheduler 是一个分布式,易扩展的可视化 DAG(有向无环图图)工作流任务调度平台。致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。 有以下主要特点: 用于大数据处理,大数据工作流调度。 以DAG图的方式,将任务按照依赖关系串联起来。
阅读全文