kettle从入门到精通 第九十二课 ETL之kettle 使用Kettle的Carte对外发布读写接口

合集 - kettle(45)
1.kettle从入门到精通 第五十一课 ETL之kettle Avro input2.kettle从入门到精通 第五十二课 ETL之kettle Avro output3.kettle从入门到精通 第五十三课 ETL之kettle MQTT/RabbitMQ producer 实战4.kettle从入门到精通 第五十三课 ETL之kettle MQTT/RabbitMQ consumer实战5.Kettle调优教程（推荐收藏）6.kettle从入门到精通 第五十五课 ETL之kettle Excel输入7.kettle从入门到精通 第五十六课 ETL之kettle Microsoft Excel Output8.kettle从入门到精通 第五十八课 ETL之kettle HTTP post使用教程9.kettle从入门到精通 第五十九课 ETL之kettle 邮件发送多个附件，使用正则轻松解决10.kettle从入门到精通 第六十课 ETL之kettle for循环处理每条数据，so easy！11.kettle从入门到精通 第六十三课 ETL之kettle kettle调用python脚本的两种方法12.kettle从入门到精通 第六十四课 ETL之kettle kettle中执行SQL脚本步骤，使用需当心13.kettle从入门到精通 第六十五课 ETL之kettle 执行动态SQL语句，轻松实现全量&增量数据同步14.kettle从入门到精通 第六十六课 ETL之kettle kettle阻塞教程，轻松获取最后一行数据，so easy15.kettle从入门到精通 第六十七课 ETL之kettle 再谈kettle阻塞，阻塞多个分支的多个步骤16.kettle从入门到精通 第六十八课 ETL之kettle kettle随机数生成的一些方案17.kettle从入门到精通 第六十九课 ETL之kettle kettle cdc mysql，轻松实现实时增量同步18.kettle从入门到精通 第七十课 ETL之kettle kettle数据校验，脏数据清洗轻松拿捏19.kettle从入门到精通 第七十一课 ETL之kettle 再谈http post，轻松掌握body中传递json参数20.kettle从入门到精通 第七十二课 ETL之kettle 三谈http post（含文件上传），彻底掌握参数传递21.kettle从入门到精通 第七十三课 ETL之kettle kettle调用http分页接口教程22.kettle从入门到精通 第七十四课 ETL之kettle kettle调用https接口教程，忽略SSL校验23.kettle从入门到精通 第七十五课 ETL之kettle血缘，数据血缘24.kettle从入门到精通 第七十六课 ETL之kettle kettle连接hive教程25.kettle从入门到精通 第七十七课 ETL之kettle kettle执行存储过程，接收数据集26.kettle从入门到精通 第七十八课 ETL之kettle kettle将文件写入数据库BLOB字段27.kettle从入门到精通 第七十九课 ETL之kettle kettle读取数据库BLOB字段转换为文件28.kettle从入门到精通 第八十课 ETL之kettle kettle中的json对象字段写入postgresql中的json字段29.kettle从入门到精通 第八十一课 ETL之kettle kettle中的json对象字段写入postgresql中的json字段正确姿势30.kettle从入门到精通 第八十二课 ETL之kettle kettle中的【阻塞数据直到步骤都完成】使用教程31.kettle从入门到精通 第八十三课 ETL之kettle kettle调用python且接收返回值32.kettle从入门到精通 第八十四课 ETL之kettle kettle中Get data from XML使用实战教程33.kettle从入门到精通 第八十五课 ETL之kettle kettle中javascript步骤调用外部javascript/js文件34.kettle从入门到精通 第八十六课 ETL之kettle kettle调用https接口忽略SSL校验35.kettle从入门到精通 第八十七课 ETL之kettle kettle文件上传36.kettle从入门到精通 第八十八课 ETL之kettle kettle连接sqlserver彻底搞明白37.kettle从入门到精通 第八十九课 ETL之kettle kettle jms activemq使用教程38.ETL之kettle 医疗行业高级陪伴群 第一课39.ETL之kettle 专业陪伴群，1元开启kettle精进之旅40.ETL之kettle版本安装包免费下载地址
41.kettle从入门到精通 第九十二课 ETL之kettle 使用Kettle的Carte对外发布读写接口
42.kettle调度管理系统XXK-PDI，kettle调度好帮手43.kettle插件-自定义函数-数据脱敏44.kettle插件-git/svn版本管理插件45.kettle插件-高性能插入更新插件Upsert
收起

 场景：使用kettle实现将查询结果返回给客户端，也就是说kettle暴露查询接口供外围系统调用。前提必须是使用carte服务才可以提供接口供外部系统调用。具体实操方法如下：

1、设计转换

根据具体需求设计转换，主要用到的步骤有获取变量（从请求参数中获取变量）、json输入（解析入参），json 输出将结果转换为json格式输出到客户端。如下图所示：

2、接收参数

使用获取变量步骤来接收接口请求参数，变量通过${}方法进行获取，如下图${PARAM}则是获取PARAM参数，将参数赋值为req字段。

 

3、解析参数

本示例中的PARAM参数为{"beginDateTime":"2024-02-04 00:00:00","endDateTime":"2025-02-07 23:59:59"}，使用json输入步骤解析该参数，分别获取beginDateTime和endDateTime两个参数，如下图所示：

 

 4、选择有效参数

使用字段选择步骤选择我们需要的字段或者修改元数据（如字段类型等），将有小参数传递给后续步骤表输入。如下图所示：

 5、根据参数查询表数据

根据beginDateTime和endDateTime两个参数查询表t1，获取id和name两个字段返回给客户端。

注意：这里sql中的的?是占位符，分别会被beginDateTime和endDateTime两个参数替换，另外从步骤插入数据要选择前置步骤字段选择且勾选执行每一行。

 

6、将结果输出

使用json output 步骤将结果输出，这里主要是需要将发送结果到Servlet进行勾选。然后定义Json条目名称和输出值字段。

 7、设置输出字段

选择我们需要输出的字段，如下图所示：

 8、Spoon 测试 转换

点击运行，输入命名参数PARAM模拟接收外部接口参数，先测试转换可以正常运行，如下图所示：

 

9、postman测试接口

启动carte服务（若对carte服务不了解的参考我前面的文章），使用postman调用/kettle/executeTrans接口，设置rep、trans、level、PARAM参数。

carte有权限控制需设置Auth参数，默认用户名和密码为cluster/cluster

 

 

返回结果中文乱码处理

在Windows环境下，返回值会因编码而导致乱码，需要在Kettle的全局配置中添加编码设置，位置 ${KETTLE_HOME}/.kettle/kettle.properties

KETTLE_DEFAULT_SERVLET_ENCODING = UTF-8

 

posted @   慕容尘轩  阅读(38)  评论(0)  编辑  收藏  举报
相关博文：
·  kettle从入门到精通 第二十一课 kettle Carte服务器
·  kettle从入门到精通 第七十七课 ETL之kettle kettle执行存储过程，接收数据集
·  kettle——入门操作(表输出)详细
·  初识Kettle.
·  kettle 简单操作流程
阅读排行：
· 10年+ .NET Coder 心语 ── 封装的思维：从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 提示词工程——AI应用必不可少的技术
· Open-Sora 2.0 重磅开源！
· 周边上新：园子的第一款马克杯温暖上架
点击右上角即可分享
微信分享提示