摘要:
A表,数据量170W,同构复制一个B表。 在存储过程中写了个循环相互插入数据。 for i in 0..5 loopinsert into a select * from b;insert into b select * from a;end loop 跑了一个小时产生了近1... 阅读全文
摘要:
fromuser && touser与full=y不能共存,即常见的 a. 用户模式: 导出用户所有对象以及对象中的数据; b. 表模式: 导出用户所有表或者指定的表; c. 整个数据库: 导出数据库中所有对象。 ... 阅读全文
摘要:
根据ODS系统解决的不同的数据问题,将ODS模型将数据按三层进行管理:分别针对细节级数据、汇总型数据和分析型数据,每个区域有自己的管理重点。下面分别介绍。基础数据层(FDM:FOUNDATION DATA MODLE)。来源于标准化的各源系统提供的业务基础数据。基础数据层的... 阅读全文
摘要:
为提高任务执行效率,同时也保证任务执行时的无相关性,(串行操作往往依赖上个任务的执行结果)并行操作势在必行。 见图中设置,step即变为绿色虚线条,各个transaction之间不存在依赖性。手机扫一扫,欢迎关注公众号关注程序员成长 阅读全文
摘要:
kettle未能正常执行任务时,同样需要记录下来执行操作,以便分析任务异常。 红色线条代表任务异常时执行的任务,绿色为正常执行的任务序列。 任务执行时都有日志记录,但kettle日志表中字段存在执行时间,但不存在业务日期字段。比如今天的任务执行的是T日期的数据,日志中就无法反... 阅读全文
摘要:
附件中列出操作步骤。 由于xls表格中存在一列是列表项,状态:status,值分有效与失效 但库中状态值存为1或0,由此需将此值映射,参见图中最后一张。手机扫一扫,欢迎关注公众号关注程序员成长 阅读全文
摘要:
KETTLE也用了几天,管理JOB没有一个直观的目录树,这一点不是很友好。在JOB中点击某一个HOP时不会进入到该HOP中去,需要右击打开才可以,操作不是很方便。 关于TRANSACTIONS中的STEP中,SWTICH / CASE 用起来还不是很方便,折腾了N久,也没解决... 阅读全文
摘要:
The Verification fails on this transformation [4 - Error] Step for false target [null] is invalid kettle 3.2版本的bug, 在kettle 4.4版本中做了修正。 ... 阅读全文
摘要:
Myeclipse 6.5使用hibernate 连接数据生成映射文件时,报异常,连接不到数据库。 一般的解决方案是如果是Windows平台,注册表里 \HKEY_LOCAL_MACHINE\SOFTWARE\ORACLE 查找键 NLS_LANG,这个键由Oracle标准... 阅读全文
摘要:
--各表空间分配情况 select tablespace_name, sum(bytes) / 1024 / 1024 from dba_data_files group by tablespace_name;--各表空间空闲情况select tablespace_nam... 阅读全文