4.MR(1)

dededea發表於2024-09-10

2.mapreduce工作流程

流程一

4.MR(1)

流程二

4.MR(1)

3.shuffle

3.1.shuffle機制

map方法之後,reduce方法之前的資料處理過程稱之為shuffle

4.MR(1)

3.2.分割槽

4.MR(1)

4.MR(1)

4.MR(1)

3.3.writablecomparable排序

(1)排序概述

4.MR(1)

4.MR(1)

(2)排序分類

4.MR(1)

4.MR(1)

4.MR(1)

3.4.combiner合併

4.MR(1)

4.MR(1)