Hadoop develop

博学笃志,切问近思,此八字,是收放心的工夫。 神闲气静,智深勇沉,此八字,是干大事的本领。

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

04 2014 档案

摘要:基于Hive+Hadoop模式构建数据仓库,是大数据时代的一个不错的选择,本文以郑商所每日交易行情数据为案例,探讨数据Hive数据导入的操作实例。 阅读全文
posted @ 2014-04-23 18:47 张子良 阅读(2344) 评论(0) 推荐(0) 编辑

摘要:FS-LDM 金融11个主题模型,大数据技术构建国家级、行业级信息中心的应用逐渐普遍,大数据只是技术而非解决方案,数据中心同样面临数据如何组织?数据逻辑模型如何构建的问题。 阅读全文
posted @ 2014-04-18 08:25 张子良 阅读(2434) 评论(0) 推荐(1) 编辑

摘要:从对大数据的狂热到理性的回归,项目实施起到了醍醐灌顶的作用,大数据技术只能作为一种IT基础架构(存储+运算),而实际的工程化实施,还是要回归到IT传统技术,最近在整合大数据时代的数据仓库框架,希望能有更多的人参与进来。数据仓库实施数据模型的组织,需要引入更多的规则,下面要谈的就是数据仓库数据内容的组织方式。来自TD,可以借鉴到大数据时代的数据仓库建设。 阅读全文
posted @ 2014-04-14 10:20 张子良 阅读(2039) 评论(0) 推荐(3) 编辑

摘要:昨天和一个做互联网大数据(零售行业)的朋友交流,关于大数据传统企业实施的切入点产生了争执,主要围绕两个问题进行了深入的探讨: 问题1:对于一个传统企业而言什么是核心业务,什么是外围业务? 问题2:大数据传统企业实施切入点到底是从核心开始还是该从外围介入? 两个问题有关联关系,如果界定不了核心与外围的边界,那么第二个问题也就无从回答。在此与大家共享,希望更多的人能参与进来发表自己的观点。 阅读全文
posted @ 2014-04-02 08:10 张子良 阅读(1605) 评论(1) 推荐(2) 编辑

摘要:hadoop专业解决方案第5章 开发可靠的MapReduce应用 阅读全文
posted @ 2014-04-01 20:26 张子良 阅读(2115) 评论(0) 推荐(1) 编辑