AI Rookies

MapReduce — 映射归约

事实

把大任务拆分处理再汇总的分布式计算模型。

人话

MapReduce 像工地包工头派活,各班组分头干,最后一张表验收。

常处理海量日志和网页,是大数据的经典分工法。

相关概念

Distributed Computing
MapReduce 是分布式计算的经典编程模型。

Big Data
它让海量数据能被拆成小块并行处理。

Data Parallelism
它把同一计算逻辑应用到多份数据分片上。