摘要: 转自:https://www.cnblogs.com/reed/p/7730360.html 大数据本身是个很宽泛的概念,Hadoop生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆,各有各的用处,互相之间又有重合。你可以用汤 阅读全文
posted @ 2018-12-06 18:57 Enki_fang 阅读(252) 评论(0) 推荐(0) 编辑
摘要: 转自:https://www.cnblogs.com/reed/p/7730338.html 今天做题,其中一道是 请简要描述一下Hadoop, Spark, MPI三种计算框架的特点以及分别适用于什么样的场景。 一直想对这些大数据计算框架总结一下,只可惜太懒,一直拖着。今天就借这个机会好好学习一下 阅读全文
posted @ 2018-12-06 18:56 Enki_fang 阅读(492) 评论(0) 推荐(0) 编辑
摘要: 转自:https://www.cnblogs.com/reed/p/7730329.html 今天看到一篇讲得比较清晰的框架对比,这几个框架的选择对于初学分布式运算的人来说确实有点迷茫,相信看完这篇文章之后应该能有所收获。 简介 大数据是收集、整理、处理大容量数据集,并从中获得见解所需的非传统战略和 阅读全文
posted @ 2018-12-06 18:55 Enki_fang 阅读(252) 评论(0) 推荐(0) 编辑
摘要: 转自:https://www.cnblogs.com/reed/p/7730313.html 谈到大数据,相信大家对Hadoop和Apache Spark这两个名字并不陌生。但我们往往对它们的理解只是提留在字面上,并没有对它们进行深入的思考,下面不妨跟我一块看下它们究竟有什么异同。 解决问题的层面不 阅读全文
posted @ 2018-12-06 18:54 Enki_fang 阅读(241) 评论(0) 推荐(0) 编辑