摘要: 总结出自文章:https://www.jianshu.com/p/734cf729d77b Kafka文件存储机制 名词概念 Broker:Kafka节点,一个Kafka节点就是一个broker,多个broker可以组成一个Kafka集群。 Topic:一类消息,消息存放的目录即主题,例如page 阅读全文
posted @ 2022-05-24 18:20 话·醉月 阅读(599) 评论(0) 推荐(0) 编辑
摘要: 环境 Java8 redis2.8 配置如下 pom文件 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </dependency> < 阅读全文
posted @ 2022-05-24 18:19 话·醉月 阅读(351) 评论(0) 推荐(0) 编辑
摘要: 背景 一个负责数据清洗的项目,以Kafka消费者的方式接受数据并处理。当消费数据数量过多时,要对项目进行性能优化。 优化方式:服务器通过部署多个项目增加项目进程的方式增加Kafka消费者的数量。每个进程里使用线程池异步做业务处理。 环境 Ubuntu18 Java8 Jenkins 前置条件 Jen 阅读全文
posted @ 2022-05-24 17:56 话·醉月 阅读(2292) 评论(0) 推荐(0) 编辑