摘要:
FusionInsight大数据开发 FusionInsight HD是一个大数据全栈商用平台,支持各种通用大数据应用场景。 技能需求 扎实的编程基础 Java/Scala/python/SQL/shell常见命令 掌握FusionInsight 熟悉业务开发 大数据应用开发流程 业务分析和方案设计 阅读全文
摘要:
Oozie应用开发 要求: Oozie简介 Oozie应用场景Oozie是一个工作流调度引擎,对各种类型的Hadoop作业进行编排与调度。 阅读全文
摘要:
Flume应用开发 要求: Flume应用场景Flume的核心是把数据从数据源收集过来,在送到目的地。为了保证输送一定成功,发送到目的地之前,会先缓存数据,待数据真正的到达目的地后,删除自己缓存的数据。Flume采用流式方法采集和传输数据,程序配置好后,不需要外部条件触发下,一直监控数据源,源源不断 阅读全文
摘要:
Streaming应用开发 Streaming的定义 Streaming基于开源Storm,是一个分布式、实时计算框架。Streaming在开源Storm的基础上增加了持续查询语言CQL、增强了安全性和可靠性。 事件驱动 连续查询 数据不存储、先计算 实时响应,低延迟 CQL(Continuous 阅读全文