2019年11月26日
生产者-消费者模型在Hudi中的应用
摘要： 介绍 模型用于解耦生产者与消费者，平衡两者之间的能力不平衡，该模型广泛应用于各个系统中，Hudi也使用了该模型控制对记录的处理，即记录会被生产者生产至队列中，然后由消费者从队列中消费，更具体一点，对于更新操作，生产者会将文件中老的记录放入队列中等待消费者消费，消费后交由 处理；对于插入操作，生产者会 阅读全文
posted @ 2019-11-26 19:14 AnalyticDBMySQLSpark 阅读(596) 评论(0) 推荐(0) 编辑