上一页 1 2 3 4 5 6 7 8 9 ··· 21 下一页
摘要: 场景: 群里有小伙伴寻求帮助,需要使用kettle来读取ActiveMQ Classic中的数据,有使用过ActiveMQ的小伙伴知道kettle中自带的jms步骤只能读取ActiveMQ Artemis中的数据, 有难度才有挑战,经过几个晚上的调试终于搞定了,今天来梳理下教程,金老师,上demo。 阅读全文
posted @ 2025-07-18 13:42 慕容尘轩 阅读(78) 评论(0) 推荐(0)
摘要: 之前有写过kettle从redis中读取数据的demo,今天咱们一起学习下kettle读取redis中的hash数据。 Redis 中的 Hash 是一个键值对的集合,也可以理解为一个字典,其中每个键(在 Hash 里通常称为字段 field)对应一个值。一个 Redis 的 Hash 可以包含多个 阅读全文
posted @ 2025-07-14 10:30 慕容尘轩 阅读(72) 评论(0) 推荐(0)
摘要: 之前我们一起学习过xxl-job调度carte,采用的xxl-job执行器方式,不了解的可以查看《kettle从入门到精通 第六十一课 ETL之kettle 任务调度器,轻松使用xxl-job调用kettle中的job和trans 》 今天我们一起来学习下使用xxl-job直接使用http调用car 阅读全文
posted @ 2025-07-14 10:29 慕容尘轩 阅读(305) 评论(0) 推荐(0)
摘要: 场景:接触kettle有一段时间了,kettle资源仓库的各种方式也都体验了一下,各自有自己的优缺点吧,今天有时间一起梳理下,互相探讨下。 1、文件仓库 文件仓库的意思kettle中设计的trans和job脚本文件放到本地文件,这种方式读取和保存速度相当快,适合单人作战模式。 1) 打开spoon客 阅读全文
posted @ 2025-07-13 16:44 慕容尘轩 阅读(227) 评论(0) 推荐(0)
摘要: 1、老铁们,前面文章写了好多我们团队老师自研的插件。这些插件帮助很多小伙伴提升了数据传输性能。 打个广告,我们团队自研的插件vip用户免费使用,且提供bug修复等。 今天给大家介绍一款团队小伙伴自研的mssql server 批量加载插件,原生的kettle中不包含此步骤,使用mssql serve 阅读全文
posted @ 2025-07-12 21:47 慕容尘轩 阅读(94) 评论(0) 推荐(0)
摘要: 1、下载DolphinScheduler DolphinScheduler官网下载安装包,选择合适的版本进行下载,地址为 https://dolphinscheduler.apache.org/zh-cn/docs/3.1.9/guide/installation/standalone 2、启动 D 阅读全文
posted @ 2025-07-12 21:46 慕容尘轩 阅读(348) 评论(0) 推荐(0)
摘要: 场景: 最近VIP群里面有小伙伴在使用apache doris遇到了一些问题,使用原生表输出步骤写doris数据库速度非常慢,体验非常不好。 我们团队老师里面将doris批量加载插件丢到群里面火速支援小伙伴,但是依然有小伙伴之前没接触过doris,使用插件时可能不太顺利。今天抽时间将此插件梳理下供小 阅读全文
posted @ 2025-05-07 22:29 慕容尘轩 阅读(1231) 评论(0) 推荐(0)
摘要: 场景:我们在写java代码或者其他程序的时候debug是家常便饭,如果不会排错不会debug,那么你就需要继续努力了。今天咱们来介绍下kettle的如何debug。 1、添加插件 老规矩,我们将插件kettle-debug-plugin放到kettle的plugins目录下面,然后重启spoon。 阅读全文
posted @ 2025-05-07 22:28 慕容尘轩 阅读(171) 评论(0) 推荐(0)
摘要: 场景:今天vip小伙伴群里发问题:自己的kettle 7.1版本无法支持数据同步到ClickHouse数据库,群里两位老师也是及时给予指导,换高点的版本或者使用我们自行研发的插件。 总之问题在vip群里会被秒杀,哈哈哈。废话少说,开始盘它。 1、拉取clickhouse镜像 docker pull 阅读全文
posted @ 2025-05-07 22:27 慕容尘轩 阅读(422) 评论(1) 推荐(0)
摘要: 今天是清明节,放假第一天也不得清闲。上午整理公司的交付文档,中午陪孩子户外骑行踏青,下午趁着休息的时间给老铁们讲下如何使用postgressql cdc插件来实时捕获数据。 注:CDC (Change Data Capture) 是一种技术,用于实时捕获和同步数据库中的更改。 1、基于docker搭 阅读全文
posted @ 2025-05-07 22:27 慕容尘轩 阅读(267) 评论(0) 推荐(0)
上一页 1 2 3 4 5 6 7 8 9 ··· 21 下一页