2018年9月26日

摘要: 1.什么是Shuffle机制 1.1)在Hadoop中数据从Map阶段传递给Reduce阶段的过程就叫Shuffle,Shuffle机制是整个MapReduce框架中最核心的部分。 1.2)Shuffle翻译成中文的意思为:洗牌、发牌(核心机制:数据分区、排序、缓存) 2.Shuffle的作用范围 阅读全文
posted @ 2018-09-26 11:09 未来不等待 阅读(13042) 评论(0) 推荐(3) 编辑

2018年9月25日

摘要: 1.Git介绍 Git是目前世界上最先进的开源的分布式版本控制系统,可以有效、高速的处理从很小到非常大的项目版本。 Git 是 Linus Torvalds 为了帮助管理 Linux 内核开发而开发的一个开放源码的版本控制软件, Git 的速度很快,这对于诸如 Linux kernel 这样的大项目 阅读全文
posted @ 2018-09-25 15:40 未来不等待 阅读(138) 评论(0) 推荐(0) 编辑

导航