資料介紹
云環(huán)境下,類似MapReduce的數(shù)據(jù)分布并行應用被廣泛運用。針對此類應用執(zhí)行效率低、成本高的問題,以Hadoop為例,首先,分析該類應用的執(zhí)行方式,發(fā)現(xiàn)數(shù)據(jù)量、節(jié)點數(shù)和任務數(shù)是影響其效率的主要因素;其次,探討以上因素對應用效率的影響;最后,通過實驗得出在數(shù)據(jù)量一定的情況下,增加節(jié)點數(shù)不會明顯提高應用的執(zhí)行效率,反而極大地增加執(zhí)行成本;當任務數(shù)接近節(jié)點數(shù)時,應用的執(zhí)行效率較高、成本較低。該結(jié)論為云環(huán)境中類似MapReduce的數(shù)據(jù)分布并行應用的效率優(yōu)化提供借鑒,并為用戶租用云資源提供參考。

- AI框架的分布式并行能力的分析和MindSpore的實踐一混合并行和自動并行
- AI框架的分布式并行能力的分析和MindSpore的實踐一混合并行和自動并行
- 云計算環(huán)境下的數(shù)據(jù)安全及其應用綜述 13次下載
- 云環(huán)境下HEDSM工作流調(diào)度策略綜述 6次下載
- 基于區(qū)塊鏈并行的以太坊數(shù)據(jù)快速導出工具 7次下載
- 基于分布式數(shù)據(jù)Cache的實時動態(tài)遷移機制 20次下載
- 如何解決多源數(shù)據(jù)融合分析過程靈活性差和處理效率低的問題方法說明 3次下載
- 使用相似連接進行多源數(shù)據(jù)并行預處理的方法概述 12次下載
- 如何在云計算環(huán)境下進行資源調(diào)度算法的研究 4次下載
- 云環(huán)境下如何使用運算電路進行同態(tài)認證的方案說明 3次下載
- 云環(huán)境下數(shù)據(jù)多副本安全共享 0次下載
- 基于云環(huán)境數(shù)據(jù)安全研究 0次下載
- 大數(shù)據(jù)環(huán)境下的分布式數(shù)據(jù)流處理關(guān)鍵技術(shù)探析 0次下載
- 虛擬化環(huán)境下多GPU并行計算研究 0次下載
- KeyNote系統(tǒng)實現(xiàn)分布式環(huán)境下的授權(quán)
- LED失效分析重要手段——光熱分布檢測 739次閱讀
- 無線終端ZWS云應用(二)—DTU 云的環(huán)境監(jiān)測行業(yè)應用 815次閱讀
- 基于PyTorch的模型并行分布式訓練Megatron解析 5.5k次閱讀
- 大模型分布式訓練并行技術(shù)(一)-概述 2.5k次閱讀
- 旋轉(zhuǎn)環(huán)境下基于FPGA的多通道數(shù)據(jù)采集系統(tǒng)設計 2.1k次閱讀
- 高效率升壓轉(zhuǎn)換器搶奪并行端口 1.2k次閱讀
- 云存儲環(huán)境下的容災有哪一些關(guān)鍵的技術(shù) 1.2k次閱讀
- 分布式工業(yè)物聯(lián)網(wǎng)云平臺是怎樣的 2k次閱讀
- 影響B(tài)UCK電源效率的因素有哪些 1.9w次閱讀
- 淺析影響功率型LED封裝取光效率的四個因素 4.8k次閱讀
- 如何使用云存儲 3w次閱讀
- 云計算平臺下僵尸網(wǎng)絡的檢測技術(shù)詳解 3.5k次閱讀
- 并行計算和分布式計算的區(qū)別和聯(lián)系 3.8w次閱讀
- 大數(shù)據(jù)環(huán)境下的綜合布線技術(shù)探析 1.5k次閱讀
- 物聯(lián)網(wǎng)環(huán)境下的云存儲安全技術(shù)研究 834次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費下載
- 0.00 MB | 1489次下載 | 免費
- 2單片機典型實例介紹
- 18.19 MB | 91次下載 | 1 積分
- 3S7-200PLC編程實例詳細資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關(guān)電源原理及各功能電路詳解
- 0.38 MB | 9次下載 | 免費
- 6基于AT89C2051/4051單片機編程器的實驗
- 0.11 MB | 4次下載 | 免費
- 7基于單片機和 SG3525的程控開關(guān)電源設計
- 0.23 MB | 3次下載 | 免費
- 8基于單片機的紅外風扇遙控
- 0.23 MB | 3次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費
- 5555集成電路應用800例(新編版)
- 0.00 MB | 33562次下載 | 免費
- 6接口電路圖大全
- 未知 | 30319次下載 | 免費
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費
- 8開關(guān)電源設計實例指南
- 未知 | 21539次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537791次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233045次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191183次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183277次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138039次下載 | 免費
電子發(fā)燒友App





創(chuàng)作
發(fā)文章
發(fā)帖
提問
發(fā)資料
發(fā)視頻
上傳資料賺積分
評論