[置顶] SeaTunnel(2.3.12)部署及其Demo(含CDC实时采集demo)

摘要: SeaTunnel部署及其Demo 从上图可以看出seatunnel的conf(执行命令文件),主要是source、transform、sink组成 📥 Source(数据源):作用:从各种数据源读取数据 🔄 Transform(数据转换):作用:对数据进行清洗、转换、加工 📤 Sink(数据 阅读全文

posted @ 2025-12-11 15:50 C_C_菜园 阅读(688) 评论(0) 推荐(2)

[置顶] 海豚调度_DolphinScheduler(3.3.2)+ Datax_3.0 + SeaTunnel_2.3.12 + DEMO演示

摘要: 一、海豚调度(DolphinScheduler_3.3.2)的使用 DAG --有向无环图,有顺序,但是不会形成环的图表。 海豚调度的API接口:http://YOURID:12345/dolphinscheduler/swagger-ui/index.html 参考 https://blog.cs 阅读全文

posted @ 2025-12-08 15:21 C_C_菜园 阅读(731) 评论(0) 推荐(0)

[置顶] 部署:海豚调度(DolphinScheduler部署)(单机Standalone部署)-3.3.2(非稳定版)

摘要: 海豚调度(DolphinScheduler)部署——Standalone 版本:3.3.2是最新版(本文使用的)。稳定版本是 3.1.9 DolphinScheduler是2019年中国易观公司开源的一个调度系统。目前是apache顶级项目之一 官网:https://dolphinscheduler 阅读全文

posted @ 2025-12-03 15:07 C_C_菜园 阅读(1498) 评论(2) 推荐(0)

[置顶] (未完待续……)DataX3.0部署、演示Demo

摘要: 1、部署 拉取代码,自己编译(不用全量包,也不需要全量包) github源码: https://github.com/alibaba/DataX 打包好了的: https://datax-opensource.oss-cn-hangzhou.aliyuncs.com/202309/datax.tar 阅读全文

posted @ 2025-11-26 16:40 C_C_菜园 阅读(333) 评论(0) 推荐(0)

[置顶] SpringBoot自定义cron表达式注册定时任务

摘要: springBoot自定义cron表达式注册定时任务 一、原理 1、使用Spring自带的TaskScheduler注册任务 2、注册后返回:ScheduledFuture,用于取消定时任务 3、注册任务后不会马上取消任务,所以将任务缓存。在需要取消任务的时候调用取消接口取消 4、cron表达式可以 阅读全文

posted @ 2023-04-21 16:51 C_C_菜园 阅读(1152) 评论(0) 推荐(1)

[置顶] Java构建树结构的公共方法

摘要: 一、前提 pId需要传入用来确认第一级的父节点,而且pId可以为null。 树实体类必须实现:TreeNode接口 MyTreeVo必须有这三个属性:id、pId、children 可以根据不同需求,配置TreeNode和MyTreeVo中固定的属性 二、代码 定义TreeNode接口 public 阅读全文

posted @ 2023-04-12 16:35 C_C_菜园 阅读(602) 评论(4) 推荐(3)

2026年1月27日

PostgreSQL:新增语句:特殊处理:ON CONFLICT ... DO (UPDATE SET ...)/(NOTHING)

摘要: 1、普通的insert into 如果(主键/唯一建)存在,则会报错 新需求:就算冲突也不报错,用其他处理逻辑 2、基本语法(INSERT INTO ... ON CONFLICT (...) DO (UPDATE SET ...)/(NOTHING)) 语法图 flowchart TD A[开始: 阅读全文

posted @ 2026-01-27 15:16 C_C_菜园 阅读(479) 评论(0) 推荐(1)

2026年1月15日

SeaTunnel(2.3.12)的高级用法(四):多个source、多个sink

摘要: 前置知识:seatunnel配置中有数据流(Data Flow)转的概念 见:https://www.cnblogs.com/kakarotto-chen/p/19487384 demo1:两个source汇聚到一个sink 关键配置:sink的:plugin_input = ["source_da 阅读全文

posted @ 2026-01-15 15:08 C_C_菜园 阅读(468) 评论(0) 推荐(0)

SeaTunnel(2.3.12)的高级用法(一):核心能力扩展:SeaTunnel 的核心概念:数据流(Data Flow)

摘要: 一句话总结(先给结论) SeaTunnel 不是“source → sink”的线性工具 👉 它是一个 “数据流(DataStream / DataFlow)驱动的 DAG 执行引擎” 你刚才验证的: 两个 source 可以流入一个 sink 正是这个模型的直接体现。 一、SeaTunnel 的 阅读全文

posted @ 2026-01-15 14:57 C_C_菜园 阅读(28) 评论(0) 推荐(0)

2026年1月8日

反编译jar包(class)文件成java文件(批量操作)

摘要: 推荐工具:Bytecode Viewer(图形界面,可导出) 包含多种反编译器可选: CFR(中文不友好) Fernflower(推荐,中文友好) Procyon Krakatau 或者用 CFR 命令行(最快): 下载:https://github.com/leibnitz27/cfr/relea 阅读全文

posted @ 2026-01-08 14:23 C_C_菜园 阅读(37) 评论(0) 推荐(0)

2026年1月4日

PostgreSQL:字符串拼接-string_agg

摘要: 一、string_agg 在 PostgreSQL 中,把多行数据中的某个字段合并成一个字符串(字段)展示,最常用且最标准的函数是 string_agg。 核心函数:string_agg 这个函数可以将选定的列的值连接起来,并用你指定的分隔符隔开。 1. 基本语法 string_agg(要合并的字段 阅读全文

posted @ 2026-01-04 16:55 C_C_菜园 阅读(103) 评论(0) 推荐(0)

2025年12月30日

海豚调度DolphinScheduler 和 Spring Cloud Data Flow 对比

摘要: Spring Cloud Data Flow Spring Cloud Data Flow是一个基于Spring Boot和Spring Cloud的开源框架,旨在简化云原生环境中数据流处理和批处理任务的开发、部署与管理。它提供了一种统一的编程和操作模型,用于编排可组合的数据微服务,支持在Cloud 阅读全文

posted @ 2025-12-30 16:22 C_C_菜园 阅读(508) 评论(0) 推荐(0)

2025年12月25日

Java设计模式-策略模式-增强

摘要: 原来的简单策略模式 Java设计模式-策略模式-基于Spring实现:https://www.cnblogs.com/kakarotto-chen/p/17761621.html 一、工厂模式分开处理不同的策略模式(最终推荐) 问题:以后把所有策略类型都写在这个工厂【原来的策略实现】,有二三十种 不 阅读全文

posted @ 2025-12-25 15:57 C_C_菜园 阅读(35) 评论(0) 推荐(0)

2025年12月24日

AI大模型排行网址、各大AI平台网址

摘要: AI大模型排行网址 https://cheniit.com/chatgpt/ai大模型排行榜网站汇总/ https://lmarena.ai/zh/leaderboard https://superclueai.com/homepage 各大AI平台网址 名字 网址 公司 DeepSeek http 阅读全文

posted @ 2025-12-24 00:18 C_C_菜园 阅读(103) 评论(0) 推荐(0)

2025年12月23日

Java单元测试、集成测试,区别

摘要: 📚 单元测试 vs 集成测试 1. 单元测试(Unit Test) 定义:测试最小代码单元(通常是一个方法或类),隔离所有外部依赖。 特点: 测试单个类/方法 所有依赖都用Mock代替 不启动Spring容器 运行极快(毫秒级) 数量最多 示例: // 测试OrderService的calcula 阅读全文

posted @ 2025-12-23 10:58 C_C_菜园 阅读(473) 评论(0) 推荐(0)

Spring用构造函数注入,别用:@Autowired或者@Resource的字段注入了

摘要: 引子 问题:使用@Autowired注入spring的bean报警告:Field injection is not recommended。 为什么以前大家都在用,现在突然要改?这背后有几个重要原因: 📅 历史背景与演进 1. 早期为什么流行Field注入? // 2010-2015年常见的写法( 阅读全文

posted @ 2025-12-23 10:53 C_C_菜园 阅读(121) 评论(0) 推荐(0)

导航