摘要: ####1. 写在前面 flume-ng高可用长在大数据处理环节第一个出现,对于处理日志文件有很好的作用,本篇博客将详细介绍flume-ng的高可用负载均衡搭建 ####2. flume-ng高可用负载均衡描述 在一般情况下,Flume-ng高可用采用server和client模式,client主要 阅读全文
posted @ 2019-04-19 22:41 技术即艺术 阅读(987) 评论(0) 推荐(0) 编辑
摘要: 1. 写在前面 在利用flink实时计算的时候,往往会从kafka读取数据写入数据到kafka,但会发现当kafka多个Partitioner时,特别在P量级数据为了kafka的性能kafka的节点有十几个时,一个topic的Partitioner可能有几十个甚至更多,发现flink写入kafka的 阅读全文
posted @ 2019-04-19 21:46 技术即艺术 阅读(4221) 评论(0) 推荐(0) 编辑