技術編號:6364466
提示:您尚未登錄,請點 登 陸 后下載,如果您還沒有賬戶請點 注 冊 ,登陸完成后,請刷新本頁查看技術詳細信息。本發(fā)明屬于數據處理,尤其涉及一種基于容量的多任務調度方法及系統(tǒng)。背景技術映射化簡(MapReduce)是一種分布式的用于處理大規(guī)模數據集的并行編程模式或者通用框架。通過定義相應的映射(Map)和化簡(Reduce)函數來實現分布式數據處理的功能。在現有基于MapReduce框架的任務調度系統(tǒng)中,包括調度節(jié)點(JobTracker)和若干個任務執(zhí)行節(jié)點(TaskTracker),其網絡架構如圖1所示,其中,客戶端用于將用戶布置的并行處理作業(yè)提交至調度節(jié)點,調...
注意:該技術已申請專利,請尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權人授權前,僅供技術研究參考不得用于商業(yè)用途。
該專利適合技術人員進行技術研發(fā)參考以及查看自身技術是否侵權,增加技術思路,做技術知識儲備,不適合論文引用。
請注意,此類技術沒有源代碼,用于學習研究技術思路。