摘要: 大数据从获取到分析的各个阶段都可能会涉及到数据集的存储,考虑到大数据有别于传统数据集,因此大数据存储技术有别于传统存储技术。大数据一般通过分布式系统、NoSQL数据库等方式(还有云数据库)进行存储。同时涉及到以下几个新理念。 本篇summary主要围绕以下三方面内容: 大数据存储方案(分布式系统、N 阅读全文
posted @ 2018-11-09 15:16 佳佳呀 阅读(8108) 评论(0) 推荐(0) 编辑
摘要: 公司内部的数据自下而上流动,同时完成数据到信息、知识、洞察的转化过程。 而企业内部数据,从日常OLTP流程中产生,实时存储进不同的数据库中。同时定期被提取、经格式转化、清洗和加载(ETL),以统一的格式存储进数据仓库,以供决策者进行OLAP处理,并将处理结果可视化。 OLTP & OLAP 企业的数 阅读全文
posted @ 2018-11-02 14:26 佳佳呀 阅读(2279) 评论(0) 推荐(0) 编辑
摘要: 大数据项目由业务驱动,一套完整且优秀的大数据解决方案对企业的发展具有战略性意义。 由于数据来源多样,导致来自不同数据源的数据类型、规模等具有不同的特征。在处理分析大数据时,将涉及到更多维度(治理、安全等)。 因此在采用大数据分析前,需对项目的整个管理流程和决策框架提前考虑。需要考虑到的内容主要有: 阅读全文
posted @ 2018-10-26 20:19 佳佳呀 阅读(1213) 评论(0) 推荐(0) 编辑
摘要: 推动大数据行业发展主要的商业因素主要有以下几种: 1. 市场动态: 经济的全球化使得全球的公司都处于紧密相连的产品和业务网中。 因此公司需要外部数据源来感知市场、完成自我定位。 同时借助合适的技术和工具,完成从描述客观事实的数据到有价值信息的转化。 2. 业务架构: 架构——是能够支持某种体系运行的 阅读全文
posted @ 2018-10-25 15:57 佳佳呀 阅读(2042) 评论(0) 推荐(0) 编辑
摘要: 在过去的十几年中,各个领域都出现了大规模的数据增长,而各类仪器、通信工具以及集成电路行业的发展也为海量数据的产生与存储提供了软件条件与硬件支持。 大数据,这一术语正是产生在全球数据爆炸式增长的背景下,用来形容庞大的数据集合。 由于大数据为挖掘隐藏价值提供了新的可能,如今工业界、研究界甚至政府部门等各 阅读全文
posted @ 2018-10-25 15:48 佳佳呀 阅读(10061) 评论(0) 推荐(0) 编辑