1.mapreduce 教程
文件簡介
這個文件描述所有使用者認識hadoop mapreduce 框架和服務
英文**
2.mapreduce命令指南
文件作用
所有的mapreduce命令通過 bin/mapred指令碼呼叫。執行mapred指令碼沒有任何引數列印所有命令的描述。
英文**：
3. 遷移從hadoop 1.x到 hadoop 2.x
這個文件提供資訊為使用者遷移mapreduce 應用程式從hadoop 1.x 到 hadoop 2.x.
英文**
4.hadoop：加密的shuffle
加密shuffle能力允許mapreduce shuffle加密使用https 和帶有選項的客戶端身份認證（https雙向認證或則https 客戶端認證）
英文**：
5.hadoop的：可插拔shuffle 和可插拔排序
可插拔的shuffle 和排序能力允許可插拔更換內建的shuffle 和排序邏輯備用的實現。
英文**：
6.hadoop的分布式快取部署
mapreduce應用框架初步支援部署新版本的mapreduce framework通過分布式快取。通過設定適當的配置屬性，使用者可以執行不同版本的mapreduce比最初部署到集群。舉例，集群管理員可以放置多個版本的mapreduce 在hdfs和配置mapred-site.xml指定哪個版本的jobs使用預設。這個允許管理員執行滾動公升級mapreduce 框架在一定條件下。
Map Reduce過程概述
map reduce的過程首先是由客戶端提交乙個任務開始的。提交任務主要是通過jobclient.runjob jobconf 靜態函式實現的 public static runningjob runjob jobconf job throws ioexception finally finally...
MapReduce 程式設計模型概述
可以帶著下面問題來閱讀 mapreduce的過程都包含什麼操作？map處理完後，tasktracer會完成什麼任務？ruducer的作用是什麼？map中經過誰的處理之後，變為reduce輸入？1.首先,我們能確定我們有乙份輸入,而且他的資料量會很大 2.通過split之後,他變成了若干的分片,每個分...
MapReduce 程式設計模型概述
mapreduce 程式設計模型給出了其分布式程式設計方法，共分 5 個步驟 1 迭代 iteration 遍歷輸入資料，並將之解析成 key value 對。2 將輸入 key value 對對映 map 成另外一些 key value 對。3 依據 key 對中間資料進行分組 grouping ...