随笔分类 - apache nifi
摘要:一.说明 在大数据平台的业务场景中,处理实时kafka数据流数据,以成为必要的能力;此篇将尝试通过Apache NiFi来接入Kafka数据然后处理后存储之HBase 二.开拔 Ⅰ).配置ConsumeKafka_0_10 a).选择ConsumeKafka_0_10 b).配置ConsumeKaf
阅读全文
摘要:一.说明 将Apache NiFi做为关系型数据与非关系型数据库的数据同步工具使用,在此场景中需要将mysql导出的avro数据格式转化为json入库HBase 二.开拔 Ⅰ).配置ExecuteSQLRecord a).选择ExecuteSQLRecord b).配置ExecuteSQLRecor
阅读全文
摘要:1).配置ExecuteSQLRecord a).选择ExecuteSQLRecord b).配置ExecuteSQLRecord c).创建DBCPConnectionPool d).配置DBCPConnectionPool e).激活服务 f).选择JsonRecordSetWriter g).
阅读全文