MapReduce:从 HDFS 输入到 Shuffle 与 YARN 调度

Block 与 InputSplit、RecordReader 与 Mapper、Map/Reduce 端 Shuffle、Combiner、数据倾斜与 YARN 调度 —— HDFS 专题的后续学习笔记。

📅 MapReduce Hadoop YARN Shuffle
GitHub 源码仓库
学习目标

理解 Block 与 InputSplit 的区别、RecordReader 与 Mapper 的分工、Map/Reduce 端 Shuffle 的职责边界、Combiner 的适用条件与 YARN 调度模型。

预计阅读

约 25 分钟

正在加载内容…

本页内容与仓库 Markdown 同源维护:更新 projects/mapreduce/content/ 下的 Markdown 即可更新本页。