2018 年 10月 18 日随笔档案 - 七宝嘤嘤怪

2018年10月18日

摘要： MapReduce运行架构前言Hadoop1.x版本Hadoop2.x版本Yarn资源调度流程:前言某天, 某研究机构设计了一款私人飞机图纸, 之后某公司根据该图纸制作出一架私人飞机. 然后某位有钱人士觉得这架飞机非常好, 就花高价钱买下这架飞机. 飞机... 阅读全文

posted @ 2018-10-18 21:03 七宝嘤嘤怪阅读(330) 评论(0) 推荐(0) 编辑

摘要： MapReduce分布式计算思想思想引入MapReduce处理流程MapReduce概述MapReduce的定义MapReduce的优缺点分布式计算思想思想引入首先, 来看三个问题:假设有1T的文件, 文件中的每一行都是一个数字; 如何在一台48core, ... 阅读全文

posted @ 2018-10-18 15:29 七宝嘤嘤怪阅读(330) 评论(0) 推荐(0) 编辑