什么是mapreduce框架?

nsc4cvqm  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(367)

我有一个项目要做,我必须解释mapreduce是如何工作的。
名称本身就是“mapreduce framework”,所以这里有个问题。这是什么意思??有人能给我举个例子,向我解释一下这个框架在哪里发生的(互联网,云,工作节点?
非常感谢你。

cuxqih21

cuxqih211#

mapreduce是google开发的一个框架,用于抽象分布式计算的复杂性。它允许您在大型分布式节点网络上轻松地并行计算。它可以用于web索引、排序、机器学习、图形计算、数据分析、大型数据库连接等。
edmond lau用“一个Map函数将输入从一种形式转换为另一种形式,一个reduce函数将中间数据合并并产生输出”来解释这个概念。hadoopmapreduce是一个受google启发的流行开源框架。
例如,使用mapreduce计算搜索索引中数十亿个网页中每个单词的频率。

相关问题