streamsets record header 属性

record 的header 属性可以在pipeline 逻辑中使用。
有写stages 会为了特殊目录创建reord header 属性,比如(cdc)需要进行crud 操作类型的区分
你可以使用一些processor 去创建或者更新record 的header 属性信息

一个简单的header处理图

参考资料

https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Pipeline_Design/RecordHeaderAttributes.html#concept_wn2_jcz_dz

posted on 2018-08-20 15:56  荣锋亮  阅读(972)  评论(0编辑  收藏  举报

导航