摘要:
为什么要上区块链系统 在落地工作启动之前,还是要费点口舌来谈谈这个话题。 不管对我们还是银行来说,正常逻辑是,要考虑清楚哪些产品适合使用区块链架构实现,哪些不适合。(当然,也有情况除外)这里参考了段新星在钛坦白的分享实录( http://www.tmtpost.com/2694378.html?fr 阅读全文
2020年10月26日 #
摘要:
描述银行数据仓库(下文简称“数仓”)分层架构至少包含ODM 贴源层、SDM 标准层、FDM 主题层和ADM 应用层。其中FDM 层的核心诉求是把复杂的源数据化繁为简,按照业务逻辑划分出金融主题,把源数据进行拆分与整合到金融主题的模型中。关键是,金融主题应该划分成什么?每个金融主题的模型建设思路是怎样 阅读全文
2020年10月19日 #
摘要:
https://www.cnblogs.com/springcsc/archive/2009/12/03/1616413.html 阅读全文
2020年10月16日 #
摘要:
互联网+AI时代,随着业务场景越来越复杂,各种开源和商业数据库品类繁多,让不少开发者眼花缭乱,无从下手。 业界有句俗语,任何脱离业务来谈架构都是瞎扯。所以用户在数据库选型时,需要从自身业务架构、业务数据量、数据类型、甚至团队成员的业务能力等多角度平衡,考量应该选择何种数据库。 那么,我们到底该如何根 阅读全文
2020年10月15日 #
摘要:
https://www.infoq.cn/article/rJpVgoFKImzKoBasMSQV 阅读全文
2020年9月25日 #
摘要:
20世纪80年代末期,数据仓库技术兴起。自Ralph Kimball 于1996 年首次出版The Data Warehouse Toolkit(Wiley)一书以来,数据仓库和商业智能(Data Warehousing and Business Intelligence, DW/BI)行业渐趋成熟 阅读全文
摘要:
https://www.cnblogs.com/yaowentao/p/13048664.html 开发udf :https://www.cnblogs.com/yaowentao/archive/2004/01/13/13614638.html 在CDH集群中使用spark插入Hbase http 阅读全文
2020年9月11日 #
摘要:
序言 美团外卖数据仓库技术团队负责支撑日常业务运营及分析师的日常分析,由于外卖业务特点带来的数据生产成本较高和查询效率偏低的问题,他们通过引入Apache Doris引擎优化生产方案,实现了低成本生产与高效查询的平衡。并以此分析不同业务场景下,基于Kylin的MOLAP模式与基于Doris引擎的RO 阅读全文
2020年9月9日 #
摘要:
硬件选型: 1、服务器:太贵:大型机、小型机(400W左右),一般起步公司假设年收2000W,硬件成本占1/4不太现实 2、PCServer:适合:最适合hadoop的支持廉价机器的,20-5W不等 3、云服务:小公司适用,但是如果数据增长过快,可能很快就需要自行搭建硬件集群,进行数据迁移。以滴滴为 阅读全文
2020年9月8日 #
摘要:
数据中台是什么? 从 Hadoop 集群的开发运维,到构建大数据平台,再到数据中台建设,这是很多大型互联网公司大数据的建设历程。到底什么是数据中台,数据中台跟我们之前一直说的大数据平台有什么区别,我想可以通过一个例子来说明。 如果我们把数据中台看作是一个汽车工厂,那大数据平台就是工厂中的设备,Had 阅读全文