baby孔祥超 - 博客园

2017年4月23日

摘要： KETTLE 是一款开源的ETL工具，通过图形界面进行设计，可以对数据进行转换。设计好的文件分为两类，一类是trans，一类是job，这些文件可以存储到文件系统中。也可以存储到数据库中。如果存储到数据库，那么可以创建配置资源库。配置步骤打开设计工具spoon.bat 点击加号点击创建或更新阅读全文

posted @ 2017-04-23 20:13 baby孔祥超阅读(486) 评论(0) 推荐(0) 编辑

kettle两表内链接的查询结果与sql语句的查询结果不符合?

摘要： 1.教师表输入 2.学生表查 3.学生表中查出的教师id进行排序 5.教师表中查出的同样也对教师的id进行排序 6.进行左连接总结：进行连接的时候的关键是同样对教师的id进行先排序阅读全文

posted @ 2017-04-23 10:50 baby孔祥超阅读(1822) 评论(0) 推荐(0) 编辑

KETTLE集群搭建

摘要： KETTLE集群搭建说明：本文档基于kettle5.4 一、集群的原理与优缺点 1.1集群的原理 Kettle集群是由一个主carte服务器和多个从carte服务器组成的，类似于master-slave结构，不同的是’master’处理具体任务，只负责任务的分发和收集运行结果。 Master c 阅读全文

posted @ 2017-04-23 10:10 baby孔祥超阅读(546) 评论(0) 推荐(0) 编辑

2017年4月21日

sunny ngrok 使用简介

摘要：与ngrok的区别：ngrok运行后形成的外网地址是变化的，即打开一次就变一次；而sunny ngrok则是固定的地址。与ngrok的相同之处：都必须运行命令行，关闭命令行则外网穿透失效使用步骤： ①访问官网：百度搜索“sunny ngrok”或打开“https://www.ngrok.cc/ 阅读全文

posted @ 2017-04-21 20:40 baby孔祥超阅读(5) 评论(0) 推荐(0) 编辑

java调用kettle_实现（2）

摘要：（1）.参照“java调用kettle_导入jar包（1）”,应用etl工具下lib里的所有jar （2）. 最近要对一个系统的数据同步到另一个系统中，要求新系统的数据结果完成之后，实时同步到另一个系统数据表中。也就是动态的传一个关联的ID。由于旧系统是vb做的，无法提供webservice接口，阅读全文

posted @ 2017-04-21 19:29 baby孔祥超阅读(6909) 评论(0) 推荐(0) 编辑

java调用kettle_导入jar包（1）

posted @ 2017-04-21 13:26 baby孔祥超阅读(4659) 评论(0) 推荐(0) 编辑

2017年4月20日

etl工具，kettle实现循环

摘要： Kettle是一款国外开源的ETL工具，纯Java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。业务模型：在关系型数据库中有张很大的数据存储表，被设计成奇偶库存储，每个库100张一模一样的表，每张表存储1000W，自动切换到下一个表。现需要同步这个数据到H 阅读全文

posted @ 2017-04-20 17:41 baby孔祥超阅读(16198) 评论(0) 推荐(0) 编辑

取得当日开始时间和结束时间

摘要： String dateStr = "04-17"; Calendar c1 = Calendar.getInstance(); c1.set(Calendar.YEAR, c1.get(Calendar.YEAR)); c1.set(Calendar.MONDAY, Integer.parseInt 阅读全文

posted @ 2017-04-20 14:01 baby孔祥超阅读(243) 评论(0) 推荐(0) 编辑

2017年4月18日

sqlServer的主键只能自增不能手动增加

摘要： 1. 2.找到相应的表，找到表设计。阅读全文

posted @ 2017-04-18 11:13 baby孔祥超阅读(1398) 评论(0) 推荐(0) 编辑

2017年4月14日

kettle利用触发器实现数据同步

摘要： 2016年8月17日一、目的通过触发器实现数据同步二、思路 1.在数据库需要同步的源表中建立一个insert触发器，当有新数据插入时，会自动将新插入数据的主键记录到临时表temp中。（当然也可以记录多个字段） 2.比较临时表temp和源表中的数据，匹配两个表中的主键值是否一致（也可以匹配多个字段阅读全文

posted @ 2017-04-14 09:55 baby孔祥超阅读(3823) 评论(3) 推荐(1) 编辑

For_elegant

公告