materialize 基于sql 的流式数据处理平
materialize 是基于pg 开发的一个可以处理流式数据的平台,同时提供了强大的数据处理能力(也出现在了最新的技术雷达中)
参考处理图
通过下图可以看到支持批处理以及实时数据处理,我们可以通过sql 支持强大的数据处理
说明
materialize 基于rust 开发,从目前官方文档的介绍发现还是很不错的,是一个值得使用的平台工具
参考资料
https://github.com/TimelyDataflow/differential-dataflow
https://github.com/materializeinc/materialize
https://materialize.io/