摘要： 场景：国产数据库（瀚高，金仓，达梦，海量等）信创环境下最近发展的势头很猛，今天我们一起来学习下瀚高数据库，从瀚高数据库中读取数据以及使用瀚高数据库作为kettle的资源仓库，废话少数，开干。 1、使用docker安装瀚高数据库。 和瀚高官网客服沟通后获取试用docker镜像文件，使用docker l 阅读全文

摘要： 1、Redash介绍 Redash 是一款开源的数据可视化和查询工具，它能够帮助用户轻松地连接各种数据源、执行查询并创建交互式可视化报表。 2、Redash系统依赖 1）依赖redis redis作用主要有任务队列管理、缓存机制、会话存储。 2）依赖postgresql postgresql的作用主 阅读全文

摘要： 1、确保本机已经安装过docker，没有安装的自行安装。 2、下载达梦镜像安装包，本次教程使用镜像为dm8_20250206_x86_rh6_64_rq_ent_8.1.4.48.tar。 3、导入镜像安装包 语法如下： docker load -i <安装包> 4、部署单机容器，如下图所示： 部署 阅读全文

摘要： 自我介绍： 大家好！我是Java小金刚，在互联网金融行业打拼了10年的老兵。如果你对Java编程、互联网金融、大数据以及软件开发领域感兴趣，那么快来关注我公众号【Java小金刚】，让我带你领略最新最炙手可热的技术动态和经验分享。 场景：kettle原生的javascript插件使用起来比较顺手，不过 阅读全文

摘要： 场景：国产数据库（金仓，达梦，瀚高，海量等）信创环境下最近发展的势头很猛，今天我们一起来学习下人大金仓（电科金仓）数据库，从金仓数据库中读取数据以及使用金仓数据库作为kettle的资源仓库，废话少数，开干。 1、使用docker安装金仓数据库。 官网下载docker镜像文件，使用docker loa 阅读全文

摘要： 场景：最近vip群小伙伴在国产麒麟系统安装kettle时遇到无法正常启动的问题，今天周末远程连麦小伙伴一起解决此问题，梳理成章，方便后续小伙伴。 1、报错信息 国产麒麟系统安装kettle时遇到无法正常启动，提示错误信息为I'm sorry, this Linux platform aarch64 阅读全文

摘要： 前面我们已经介绍了很多kettle插件，每个kettle插件都它的使用场景，我们在做数据同步ETL的过程中，势必要处理一些脏数据，把数据质量提高。今天我们一起来学习这这款数据清洗插件。 1、转换设计 1）生成记录 模拟数据输入 2）数据清洗 选择具体的数据清洗规则对数据进行清洗 3）写日志 输出清洗 阅读全文

摘要： 场景：在一个kettle交流群内，有一个小伙伴求助：大致意思是json input的输入参数的key中存在点号，凡是带点号的key都无法正确获取。 今天一起来分析下使用多种方式来解决这个问题，希望后续有人遇到此类问题时可以秒杀它，而不是花费N根头发！！！ 1、json数据构造 { "id": "1" 阅读全文

摘要： 场景： 昨天发布了Oracle CDC的使用教程，有一位朋友留言“sql server cdc”是否可以，答案是肯定的。 废话少说，开干，今天咱们一起来学习Sqlserver cdc。 1、安装sqlserver数据库 本教程使用 docker 安装sqlserver，命令如下： docker ru 阅读全文

摘要： 自我介绍： 大家好！我是Java小金刚，在互联网金融行业打拼了10年的老兵。如果你对Java编程、互联网金融、大数据以及软件开发领域感兴趣，那么快来关注我公众号【Java小金刚】，让我带你领略最新最炙手可热的技术动态和经验分享。 场景： 群里时不时会有小伙伴询问Oracle cdc的相关问题，我本人 阅读全文