09 2018 档案

Spark2.1.0模型设计与基本架构（下）

摘要：每项技术的诞生都会由某种社会需求所驱动，Spark正是在实时计算的大量需求下诞生的。Spark借助其优秀的处理能力，可用性高，丰富的数据源支持等特点，在当前大数据领域变得火热，参与的开发者也越来越多。阅读全文

posted @ 2018-09-29 17:53 泰山不老生阅读(1146) 评论(0) 推荐(0) 编辑

Spark2.1.0模型设计与基本架构（上）

摘要：随着近十年互联网的迅猛发展，越来越多的人融入了互联网——利用搜索引擎查询词条或问题；社交圈子从现实搬到了Facebook、Twitter、微信等社交平台上；女孩子们现在少了逛街，多了在各大电商平台上的购买；喜欢棋牌的人能够在对战平台上找到世界各地的玩家对弈。在国内随着网民数量的持续增加，造成互联网公司的数据在体量、产生速度、多样性等方面呈现出巨大的变化。本文将对Spark的背景、基础知识、模块设计进行介绍。阅读全文

posted @ 2018-09-18 10:44 泰山不老生阅读(2022) 评论(4) 推荐(0) 编辑