PDI(Kettle)的使用一
Kettle 是 PDI 以前的名称,PDI 的全称是Pentaho Data Integeration
Kettle是ETL中的一个开源工具,Java开发
https://github.com/pentaho/pentaho-kettle
ETL是EXTRACT(抽取)、TRANSFORM(转换)、LOAD(加载)
Kettle的主要工具:
Spoon:
图形化工具,用于快速设计和维护复杂的ETL工作流
Pan:
用来执行转换
Kitchen:
用来执行作业
Kettle中有两种脚本文件
transformation完成针对数据的基础转换
job则完成整个工作流的控制
下载pdi-ce-9.0.0.0-423.zip版本,解压
双击Spoon.bat
转换eg:
1.创建转换
双击转换
2.数据库连接
双击DB,设置连接信息
3.核心对象
将表输入和表输出拖拽到右侧转换窗口
编辑表输入
将两个操作进行连接:按shift+指针从表输入拖拽至表输出
编辑表输出
保存当前转化
执行转换
数据从localTest指定的库sys_user到了localTest1指定库的user表
注:
在Kettle中,数据的单位是行,数据流就是数据行从一个步骤到另一个步骤的移动
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· SQL Server 2025 AI相关能力初探
· Linux系列:如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列(二):开始使用ML.NET
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· C#/.NET/.NET Core优秀项目和框架2025年2月简报
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
· 【杭电多校比赛记录】2025“钉耙编程”中国大学生算法设计春季联赛(1)