Springboot kafka 集成过程中的问题
Q1:Failed to start bean 'org.springframework.kafka.config.internalKafkaListenerEndpointRegistry'
A1:是因为没有在注入时未对其进行配置导致,注册参照如下
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 | /** * Created by wolf 2018/12/1 */ @Configuration @EnableKafka public class kafkatemplateConfig { @Value ( "${spring.kafka.bootstrap-servers}" ) private String bootstrapServers; @Bean public KafkaListenerContainerFactory<ConcurrentMessageListenerContainer<String,String>> kafkaListenerContainerFactory(){ ConcurrentKafkaListenerContainerFactory<String,String> factory = new ConcurrentKafkaListenerContainerFactory<>(); factory.setConsumerFactory(consumerFactory()); factory.setConcurrency( 3 ); factory.getContainerProperties().setPollTimeout( 5000 ); return factory; } @Bean public ConsumerFactory<String,String> consumerFactory(){ return new DefaultKafkaConsumerFactory<>(consumerConfigs()); } @Bean public Map<String,Object> consumerConfigs(){ Map<String,Object> propsMap = new HashMap<>(); propsMap.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, this .bootstrapServers); propsMap.put(ConsumerConfig.ENABLE_AUTO_COMMIT_CONFIG, false ); //自行控制提交offset propsMap.put(ConsumerConfig.AUTO_COMMIT_INTERVAL_MS_CONFIG, "100" ); //提交延迟毫秒数 propsMap.put(ConsumerConfig.SESSION_TIMEOUT_MS_CONFIG, "15000" ); //执行超时时间 propsMap.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer. class ); propsMap.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer. class ); propsMap.put(ConsumerConfig.GROUP_ID_CONFIG, "dsafas" ); propsMap.put(ConsumerConfig.AUTO_OFFSET_RESET_CONFIG, "latest" ); //开始消费位置 return propsMap; } @Bean public Consumer listener(){ return new Consumer(); } } |
Q2:a:Could not instantiate class org.springframework.kafka.support.serializer.JsonDeserializer
b:org.springframework.kafka.support.serializer.JsonDeserializer with modifiers "protected"
c:If the serializationyou can also enable trust all (*)
A2:看下是因为要为监听者得到的对象 在进行序列化与反序列化 要进行设置在上述配置类中如下两列针对该问题
1 2 | propsMap.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer. class ); propsMap.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer. class ); |
Q3:java.lang.IllegalArgumentException: Magic v1 does not support record headers
A3:版本问题 我其实遇到时是用的 springboot.version: 2.1.0.RELEASE 部署的kafka组件版本为较新版kafka_2.11-2.1.0 与旧版kafka_2.12-0.10.2.1 最终将springboot.version换成1.5.10.RELEASE
作者: NHZ-M
出处:https://www.cnblogs.com/nhz-M/p/10048047.html
版权:本文采用「署名-非商业性使用-相同方式共享 4.0 国际」知识共享许可协议进行许可。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· 阿里巴巴 QwQ-32B真的超越了 DeepSeek R-1吗?
· 【译】Visual Studio 中新的强大生产力特性
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 【设计模式】告别冗长if-else语句:使用策略模式优化代码结构