02 2018 档案

【译】Flink + Kafka 0.11端到端精确一次处理语义的实现
摘要：本文是翻译作品，作者是Piotr Nowojski和Michael Winters。前者是该方案的实现者。 原文地址是https://data-artisans.com/blog/end-to-end-exactly-once-processing-apache-flink-apache-kafka 阅读全文
posted @ 2018-02-22 16:50 huxihx 阅读(4848) 评论(1) 推荐(2) 编辑
Kafka元数据缓存(metadata cache)
摘要：经常有人问的一个问题就是：Kafka broker到底是不是无状态的？网上有这样的说法： 正常情况下consumer会在消费完一条消息后线性增加这个offset。当然，consumer也可将offset设成一个较小的值，重新消费一些消息。因为offet由consumer控制，所以Kafka brok 阅读全文
posted @ 2018-02-11 10:02 huxihx 阅读(6875) 评论(6) 推荐(2) 编辑
Kafka的CommitFailedException异常
摘要：一、含义 CommitFailedException异常：位移提交失败时候抛出的异常。通常该异常被抛出时还会携带这样的一段话： Commit cannot be completed since the group has already rebalanced and assigned the par 阅读全文
posted @ 2018-02-02 16:35 huxihx 阅读(20040) 评论(2) 推荐(5) 编辑