大数据之MapReduce

今天又复习了关于MapReduce的知识

先看一下什么是MapReduce

MapReduce是“分散->汇总”模式的分布式计算框架,可供开发人员开发相关程序进行分布式数据计算。 MapReduce提供了2个编程接口: Map Reduce 其中 Map功能接口提供了“分散”的功能, 由服务器分布式对数据进行处理 Reduce功能接口提供了“汇总(聚合)”的功能,将分布式的处理结果汇总统计 用户如需使用MapReduce框架完成自定义需求的程序开发 只需要使用Java、Python等编程语言,实现Map Reduce功能接口即可。

MapReduce的原理

 

posted @   哈哈哈老先生  阅读(54)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· Ollama——大语言模型本地部署的极速利器
· 使用C#创建一个MCP客户端
· 分享一个免费、快速、无限量使用的满血 DeepSeek R1 模型,支持深度思考和联网搜索!
· ollama系列1:轻松3步本地部署deepseek,普通电脑可用
· 按钮权限的设计及实现
点击右上角即可分享
微信分享提示