摘要: 大数据实践:ODI和Twitter(二) 在前面的文章中,我们已经使用flume将数据从twitter抓取到Hive中,现在我们来看看ODI(Oracle Data Integrator)如何在HIVE表中进行逆向工程,打开HIVE模型,然后在逆向工程中选择“新的数据存储”及待逆向的对象,如下: ... 阅读全文
posted @ 2015-01-11 22:43 doubletree 阅读(820) 评论(0) 推荐(0) 编辑
摘要: 本文利用twitter做为数据源,介绍使用Oracle大数据平台及Oralce Data Integrator工具,完成从twitter抽取数据,在hadoop平台上处理数据,并最终加载到oracle数据库。数据集成分为三个阶段:获取、整理、分析和决策。 本文从实际出发,讲述大数据处理的真实案例,... 阅读全文
posted @ 2015-01-09 18:17 doubletree 阅读(675) 评论(0) 推荐(0) 编辑
摘要: 本文主要介绍OGG中一些过滤或计算函数的用法,以及sqlexec的基本用法SQLPREDICATE在使用OGG初始化时,可以添加此参数到extract中,用于选择符合条件的记录,下面是OGG官方文档中的描述 :“在用OGG初始化数据时,使用SQLPredicate是比where或filter更好的一... 阅读全文
posted @ 2015-01-04 21:31 doubletree 阅读(2148) 评论(0) 推荐(0) 编辑
摘要: 一、GemFire是什么? 如果你了解Redis或memCached,那么恭喜,你很快就能理解GemFire是什么,没错,你可以把它理解为一个增强版的Redis,具体在哪些方面增强,我们日后慢慢聊。如果你不了解Redis,也没有关系,先看官方网站上的说法:Pivotal GemFire is the 阅读全文
posted @ 2015-01-02 23:09 doubletree 阅读(31746) 评论(0) 推荐(4) 编辑