随笔分类 - kafka
摘要：1.引入kakka依赖 <dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</artifactId> </dependency> 2.修改配置文件 # 应用名称 spring.appli
阅读全文
摘要：场景： 100万日活（中型公司），每人每天100条日志，每天总共的日志条数是100万 * 100条 = 1亿条。其日志处理速度为：1亿条/24小时/60分/60秒 ≈ 1157条/每秒钟。 假设每条日志大小：0.5k - 2k（取1k）， 则：1157条/每秒钟 * 1k ≈ 1m/s 。 高峰期每
阅读全文
摘要：1.Kafka概述 1.1kafka定义 Kafka传统定义：Kafka是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域。使用Scala语言编写，是Apache的顶级项目。 发布/订阅：消息的发布者不会将消息直接发送给特定的订阅者，而是将发布的消
阅读全文
摘要：https://blog.csdn.net/weixin_44943959/article/details/123236738
阅读全文
摘要：报错异常信息：UnknownHostException 10:52:12.565 [kafka-producer-network-thread | client1] WARN org.apache.kafka.clients.NetworkClient - [Producer clientId=cl
阅读全文
