摘要:基于Hive+Hadoop模式构建数据仓库,是大数据时代的一个不错的选择,本文以郑商所每日交易行情数据为案例,探讨数据Hive数据导入的操作实例。
阅读全文
04 2014 档案
摘要:FS-LDM 金融11个主题模型,大数据技术构建国家级、行业级信息中心的应用逐渐普遍,大数据只是技术而非解决方案,数据中心同样面临数据如何组织?数据逻辑模型如何构建的问题。
阅读全文
摘要:从对大数据的狂热到理性的回归,项目实施起到了醍醐灌顶的作用,大数据技术只能作为一种IT基础架构(存储+运算),而实际的工程化实施,还是要回归到IT传统技术,最近在整合大数据时代的数据仓库框架,希望能有更多的人参与进来。数据仓库实施数据模型的组织,需要引入更多的规则,下面要谈的就是数据仓库数据内容的组织方式。来自TD,可以借鉴到大数据时代的数据仓库建设。
阅读全文
摘要:昨天和一个做互联网大数据(零售行业)的朋友交流,关于大数据传统企业实施的切入点产生了争执,主要围绕两个问题进行了深入的探讨:
问题1:对于一个传统企业而言什么是核心业务,什么是外围业务?
问题2:大数据传统企业实施切入点到底是从核心开始还是该从外围介入?
两个问题有关联关系,如果界定不了核心与外围的边界,那么第二个问题也就无从回答。在此与大家共享,希望更多的人能参与进来发表自己的观点。
阅读全文
摘要:hadoop专业解决方案第5章 开发可靠的MapReduce应用
阅读全文