ETL工具-nifi干货系列 第十四讲 nifi处理器QueryDatabaseTableRecord查询表数据实战教程

1、处理器QueryDatabaseTableRecord和处理器QueryDatabaseTable比较相似,该组件生成一个 SQL 查询,或者使用用户提供的语句,并执行它以获取所有在指定的最大值列中值大于先前所见最大值的行。QueryDatabaseTable的查询结果将被转换为 Avro ,而QueryDatabaseTableRecord的查询结果则被转换为 Avro/Json等格式,如下图所示:

 2、处理器QueryDatabaseTableRecord支持的输出格式有avro、csv、freeFormText、Json、xml等,如下图所示:

 3、处理器QueryDatabaseTableRecord属性配置,如下图所示:

 处理器QueryDatabaseTableRecord属性配置和处理器QueryDatabaseTable属性配置基本一样,不了解的可以参考上一篇文章。唯独多了Record Writer属性。

 4、点击运行,然后查看数据溯源信息,attributes 中多了tablename、querydbtable.row.count、mime.type、record.count属性如下图所示:

 

 

 点击content选项卡,可以看到flowfile的content,点击view进行查看数据,如下图所示:

 

 点击view查看数据,这里RecordWriter采用的JsonRecordSetWriter,所以输出的原始数据是json格式的且中文也能够正常展示,如下图所示:

 

 

 

 

posted @ 2024-04-17 22:37  慕容尘轩  阅读(98)  评论(0编辑  收藏  举报