streamsets 3.5 的一些新功能

streamsets 3.5 有了一些新的特性以及增强,总之是越来越方便了,详细的可以
查看官方说明,以下简单例举一些比较有意义的。

origins

  • 新的pulsar 消费origin
  • jdbc 多表消费者以及jdbc 查询消费者功能增强
  • salesforce 组件增强
  • websocket 组件增强,对于microservice pipeline 可以发送响应到源请求了

processors

  • 新的加解密字段处理器
  • 新的mongodb 查找处理器
  • 新的http 路由处理器
  • 字段类型转换的增强
  • salesforce 查找处理器的增强

目的

  • 新的pulsar 生产者组件
  • 新的syslog 组件

executors

  • 新的databricks 执行器

其他

  • 数据格式的扩展
  • stages 的增强
  • sdc edge 的增强(windows event log tensorflow。。。。)

参考资料

https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/WhatsNew/WhatsNew_Title.html#concept_hz3_5fk_fy

posted on 2018-10-23 09:15  荣锋亮  阅读(560)  评论(0编辑  收藏  举报

导航