摘要: ```java package com.infinitus.cdc.test; import org.apache.kafka.clients.consumer.ConsumerRecord; import org.apache.kafka.clients.consumer.ConsumerReco 阅读全文
posted @ 2023-05-26 11:33 levi125 阅读(258) 评论(0) 推荐(0) 编辑
摘要: 什么是 Hadoop Apache Hadoop 软件库是一个框架,它允许使用简单的编程模型,实现跨计算机集群的大型数据集的分布式处理。它最初的设计目的是为了检测和处理应用程序层的故障,从单个机器扩展到数千台机器(这些机器可以是廉价的),每个机器提供本地计算和存储,而不是依靠硬件提供高可用性。 Ha 阅读全文
posted @ 2022-06-27 14:12 levi125 阅读(1129) 评论(2) 推荐(0) 编辑
摘要: 简介 用习惯了SpringBoot框架来读取yaml配置,突然转到非Spring的普通java项目,读取配置文件有点麻烦。为了能像之前用SrpingBoot一样使用yaml,所以网上找了下类似的工具类,新增了主动设置profile方法。 而且有时候即使在Springboot框架下,使用这种工具类还有 阅读全文
posted @ 2022-06-16 11:17 levi125 阅读(2124) 评论(0) 推荐(1) 编辑
摘要: 简介 写了个工具类方便多线程消费List数据 Maven 用到了guava的Lists工具切分,maven坐标: <dependency> <groupId>com.google.guava</groupId> <artifactId>guava</artifactId> <version>20.0 阅读全文
posted @ 2022-01-07 17:12 levi125 阅读(396) 评论(2) 推荐(0) 编辑
摘要: 一. Mysql分页SQL语法 收到客户端{pageNo:1,pagesize:10} select * from table limit (pageNo-1)*pageSize, pageSize; select * from table limit pageSize offset (pageNo 阅读全文
posted @ 2021-09-10 17:30 levi125 阅读(753) 评论(0) 推荐(1) 编辑
摘要: 简介 记录一些使用Flink SQL时遇到的报错日志信息。 一:Caused by: java.lang.Exception: Pod terminated, container termination statuses: [flink-task-manager(exitCode=239, reas 阅读全文
posted @ 2021-08-21 22:42 levi125 阅读(2566) 评论(0) 推荐(0) 编辑
摘要: 简介 只要包含一个乱码,即返回为true. 该方法正在试用中,请勿直接上生产,暂时记录一下。 工具类 import org.apache.commons.lang3.StringUtils; import java.util.regex.Matcher; import java.util.regex 阅读全文
posted @ 2021-03-17 16:40 levi125 阅读(969) 评论(0) 推荐(0) 编辑
摘要: 简介 通过json格式的文件导入一条数据记录,或导出一条记录的Json内容。 Maven 只列出主要依赖 <dependency> <groupId>commons-io</groupId> <artifactId>commons-io</artifactId> <version>2.8.0</ve 阅读全文
posted @ 2021-03-09 17:47 levi125 阅读(2669) 评论(0) 推荐(0) 编辑
摘要: 简介 Apache Ignite是一个水平可扩展以及容错的分布式SQL数据库,分布式数据是以复制或者分区的形式提供的。 作为一个SQL数据库,Ignite支持所有的DML指令,包括SELECT、UPDATE、INSERT和DELETE,它还实现了一个与分布式系统有关的DDL指令的子集。 可以像其它的 阅读全文
posted @ 2021-03-08 17:26 levi125 阅读(718) 评论(0) 推荐(0) 编辑
摘要: 简介 通过 pulsar-flink-connector 读取到 Apache pulsar 中的namespaces、topics的元数据信息。 pulsar-flink-connector 的 github: https://github.com/streamnative/pulsar-flin 阅读全文
posted @ 2021-03-08 16:31 levi125 阅读(1094) 评论(15) 推荐(0) 编辑