streamsets stream selector 使用
stream selector 就是一个选择器,可以方便的对于不同record 的数据进行区分,并执行不同的处理
pipeline flow
stream selector 配置
local fs 配置
主要是进行数据的存储
运行效果
- dev 数据
- 效果
参考资料
https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Processors/StreamSelector.html#concept_tqv_t5r_wq
https://github.com/rongfengliang/streamsets-demos