2013年11月11日

20131111

摘要: Oracle:建立分区表,把表重命名,create table 表名()as select * from 表名_1 patition by 完了之后再建立索引 主键需要改名字, 还有备注。Goldengate:可以建立Job Group compare 对比出表的不同。 每一行不同的是什么看report 阅读全文

posted @ 2013-11-11 19:23 Ysan23 阅读(124) 评论(0) 推荐(0) 编辑

2013年11月10日

20131110

摘要: Goldengate:检核思路:现在能实现表与表的对比,配置Job,查看错误信息等操作。问题在如何定时启动。 阅读全文

posted @ 2013-11-10 22:28 Ysan23 阅读(94) 评论(0) 推荐(0) 编辑

2013年11月9日

20131109

摘要: Goldengate:检核方面的小突破,学会使用veridata 构造源端 目标端数据库,远端目标端建立AGENT 起服务。按照用户,把所有表检核出来。搭建环境OGG环境。 阅读全文

posted @ 2013-11-09 19:45 Ysan23 阅读(75) 评论(0) 推荐(0) 编辑

2013年11月8日

20131108

摘要: 发工资,交房贷。Oracle:数据仓库备数据:ods表 有一些没有ODS_DATA_DATE需要表清单。BDS全用户导表,ADS_h表清单SMT按表清单导前一天数据。二代支付:需要交易对手信息的交易表。 报表按照账号取相关联的信息。Goldengate:需要想好源端和目标端的检核问题。分表,分时间。 如何运用检核,掉SHELL脚本,开发前台页面。手动停起OGG。 阅读全文

posted @ 2013-11-08 19:14 Ysan23 阅读(85) 评论(0) 推荐(0) 编辑

2013年11月7日

20131107

摘要: Oracle:ODI不改变日期,随便都有ODS_DATA_DATE删除。二代支付,取对手信息。检核规则学习。Goldengate:配置环境。 阅读全文

posted @ 2013-11-07 21:57 Ysan23 阅读(84) 评论(0) 推荐(0) 编辑

2013年11月6日

20131106

摘要: 数据仓库:BDS层保持全量数据,导数的时候注意不要按照时间戳。ADS都可以抛出数来,BDS无论是不是增量更新。集团账户子账户汇总在FCR中跑过程。千万导数据时别导成SQL数据量大时。Glodengate:布置环境,表清单,Rac环境搭建。起停操作界面,显示每张表数据那个进程,报了什么错。 阅读全文

posted @ 2013-11-06 18:53 Ysan23 阅读(102) 评论(0) 推荐(0) 编辑

2013年11月5日

20131105

摘要: Oracle:导入导出数据库脚本,用本来的工具exp imp。相当于Truncate Append追加 Replace把表结构破坏expdp impdp file log table compression=all压缩Hadoop:实时日志分析。KMeans:微博情感类分析源码。 阅读全文

posted @ 2013-11-05 19:10 Ysan23 阅读(106) 评论(0) 推荐(0) 编辑

2013年11月4日

20131104

摘要: Oracle:二代支付需求:只有大额来往帐有拆借金额和日期。Goldengate:FCR核心EOD 数据仓库抽取实时库中的数,这时候停replicate进程,只留抽取进程。抽完后再起复制进程。百度知道:我总是在回答百度知道的问题,只是因为我怕我学的东西都淡忘了。Java:回顾了文件的读取,写入,对File的操作。写入内容Scanner! 阅读全文

posted @ 2013-11-04 18:53 Ysan23 阅读(110) 评论(0) 推荐(0) 编辑

2013年11月3日

20131103

摘要: Oracle:去生产做了优化。BDS过程进行备份,留下一些数据。其他的备份到历史表。create table 要比insert快很多。 建立分区表create table ABCpartiton(。。。)as select * from ABC_H t where t.start_date>'20130901' 阅读全文

posted @ 2013-11-03 15:21 Ysan23 阅读(116) 评论(0) 推荐(0) 编辑

2013年11月2日

20131101

摘要: 数据仓库:正在做吉林银行二代支付系统升级数据仓库部分,改造影响下游系统的存储过程.同城交易,西联的不包括其中.大小额来往帐所有表都要变化.从不同的N多张表中取其中的字段.客户化的表增加字段,改字段长度.会影响下游.Goldengate:源端FCR库------Extract-----本地trail-----------TCP/IP-------远程trail---------Replicat--目标库(实时报表查询系统)开启归档日志,goldengate从日志中读取增量更新的数据. 第一次数据同步,采用数据泵.实现压秒级同步.有DDL和DMLOracle:begindeclare 要输出的变量 阅读全文

posted @ 2013-11-02 16:45 Ysan23 阅读(147) 评论(0) 推荐(0) 编辑

导航