摘要：添加如下依赖： <dependency> <groupId>com.google.guava</groupId> <artifactId>guava</artifactId> <version>30.1.1-jre</version> </dependency> 阅读全文

摘要：转：https://blog.csdn.net/wppwpp1/article/details/102574955/ ClickHouse 连接方式 ClickHouse提供两个网络端口： HTTP 默认8123 TCP 默认9000 官方jar包（ru.yandex.clickhouse）默认是8 阅读全文

摘要：需求：实时监控集群日志（hadoop、spark、kafka等） 思路：利用filebeat收集每个服务器中的日志并发送到统一logstash中，通过logstash输出到其它地方。由于集群可能有成百上千个节点，需使用ansible统一安装filebeat。 1、安装logstash 官方下载地址： 阅读全文

摘要：kafka默认位移提交方式是自动提交，由参数enable.auto.commit配置，默认为true。自动提交是定期提交，周期时间由auto.commit.interval.ms配置，默认是5s，此参数生效的前提是enable.auto.commit为true。 在Kafka中每当消费者查找不到所记 阅读全文

摘要：参数名称 默认值 参数释义 bootstrap.servers "" 指定连接kafka集群所需的broker地址清单 可以只指定某一个broker，多个需用逗号隔开 key.serializer "" 消息中key对应的序列化类 value.serializer "" 消息中value对应的序列化 阅读全文