技術編號:9471447
提示:您尚未登錄,請點 登 陸 后下載,如果您還沒有賬戶請點 注 冊 ,登陸完成后,請刷新本頁查看技術詳細信息。MapReduce計算框架作為Hadoop平臺的核心組件,Hadoop平臺所有計算任務都是在MapReduce上完成的,所以Hadoop平臺的計算效率和吞吐量與MapReduce的作業(yè)執(zhí)行效率和吞吐量息息相關。在Hadoop平臺,MapReduce分布式計算框架是搭建在以冗余形式存儲數(shù)據(jù)塊的分布式文件系統(tǒng)HDFS上,HDFS以數(shù)據(jù)塊的形式存儲用戶數(shù)據(jù)并且數(shù)據(jù)塊默認冗余數(shù)為3,也就是說一個作業(yè)對應的文件大小為100個數(shù)據(jù)塊(在HDFS中,數(shù)據(jù)塊默認大小為64...
注意:該技術已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術研究參考不得用于商業(yè)用途。
該專利適合技術人員進行技術研發(fā)參考以及查看自身技術是否侵權(quán),增加技術思路,做技術知識儲備,不適合論文引用。
請注意,此類技術沒有源代碼,用于學習研究技術思路。