materialize 基于sql 的流式数据处理平

materialize 是基于pg 开发的一个可以处理流式数据的平台,同时提供了强大的数据处理能力(也出现在了最新的技术雷达中)

参考处理图

通过下图可以看到支持批处理以及实时数据处理,我们可以通过sql 支持强大的数据处理 

 

 

说明

materialize 基于rust 开发,从目前官方文档的介绍发现还是很不错的,是一个值得使用的平台工具

参考资料

https://github.com/TimelyDataflow/differential-dataflow 
https://github.com/materializeinc/materialize 
https://materialize.io/

posted on 2020-11-01 11:11  荣锋亮  阅读(851)  评论(0编辑  收藏  举报

导航