kafka集群的错误处理--kafka一个节点挂了，导致消费失败
摘要：kafka集群的错误处理--kafka一个节点挂了，导致消费失败
阅读全文
posted @
2020-08-05 18:38
tigerloveapple
阅读(732)
推荐(0) 编辑
【转载】震惊了！原来这才是kafka！
摘要：https://www.jianshu.com/p/d3e963ff8b70 kafka是一个分布式消息队列。具有高性能、持久化、多副本备份、横向扩展能力。 生产者往队列里写消息，消费者从队列里取消息进行业务逻辑。一般在架构设计中起到解耦、削峰、异步处理的作用。 kafka对外使用topic的概念，
阅读全文
posted @
2020-08-05 18:30
tigerloveapple
阅读(224)
推荐(0) 编辑
学习链接汇总
摘要：码云 https://gitee.com/ yudao源码 http://www.iocoder.cn/ kafka教程和翻译文章 开源的api https://sdk.cn git上好链接 占小狼的博客 mysql5.7官方技术参考 java资源包 https://github.com/jobbo
阅读全文
posted @
2019-12-30 20:44
tigerloveapple
阅读(261)
推荐(0) 编辑
kafka重新启动时出现：found a corrupted index file due to requirement failed问题解决方法
摘要：kafka重新启动时出现：found a corrupted index file due to requirement failed问题解决方法 问题如下：解决方法：删除kafka目录下的日志文件即可解决 问题如下：解决方法：删除kafka目录下的日志文件即可解决 问题如下： 解决方法： 删除ka
阅读全文
posted @
2019-06-05 15:17
tigerloveapple
阅读(1655)
推荐(0) 编辑
kafka命令大全
摘要：kafka命令大全 http://orchome.com/454
阅读全文
posted @
2019-04-17 20:50
tigerloveapple
阅读(344)
推荐(0) 编辑
关于Kafka __consumer_offests的讨论
摘要：https://www.cnblogs.com/huxi2b/p/8316289.html 五、副本因子 __consumer_offest不受server.properties中num.partitions和default.replication.factor参数的制约。相反地，它的分区数和备份因
阅读全文
posted @
2019-04-17 20:49
tigerloveapple
阅读(284)
推荐(0) 编辑
kafka集群的错误处理--kafka一个节点挂了，导致消费失败
摘要：今天由于kafka集群搭建时的配置不当，由于一台主消费者挂掉(服务器崩了，需要维修)，导致了所有新版消费者(新版的offset存储在kafka)都无法拉取消息。 由于是线上问题，所以是绝对不能影响用户的，使用老版客户端(offset存储在zk)进行消费，然后将kafka迁移到备用服务。 下面来说一下
阅读全文
posted @
2019-04-16 20:49
tigerloveapple
阅读(12970)
推荐(0) 编辑
kafka 生产消费原理详解
摘要：https://blog.csdn.net/qiaqia609/article/details/78899298 Kafka--Consumer消费者
阅读全文
posted @
2019-01-21 20:49
tigerloveapple
阅读(357)
推荐(0) 编辑
大数据开源技术分类
摘要：hadoop 分布式处理大数据的框架 分为三个阶段： 1）data -db -user/app 2）data - 存储hdfs - 处理mapreduce - user/apps 大数据开源技术分类 3）DATA - 数据传输/采集 - 数据处理 - 数据存储 - 数据查询 - users/apps
阅读全文
posted @
2018-09-16 13:07
tigerloveapple
阅读(834)
推荐(0) 编辑
kafka 常用命令
摘要：Kafka 解压，进入kafka目录下的bin目录 启动zk nohup ./zookeeper-server-start.sh ../config/zookeeper.properties & nohup ./bin/zookeeper-server-start.sh ./config/zooke
阅读全文
posted @
2017-08-29 17:06
tigerloveapple
阅读(8374)
推荐(0) 编辑
ActiveMQ入门实例
摘要：ActiveMQ入门实例 activemq的几种基本通信方式总结
阅读全文
posted @
2017-08-06 15:19
tigerloveapple
阅读(92)
推荐(0) 编辑
RabbitMQ 主题
摘要：RabbitMQ （三） 发布/订阅 RabbitMQ主题 RabbitMQ Tutorials
阅读全文
posted @
2017-02-28 15:53
tigerloveapple
阅读(121)
推荐(0) 编辑
