資料介紹
云環(huán)境下,類似MapReduce的數(shù)據分布并行應用被廣泛運用。針對此類應用執(zhí)行效率低、成本高的問題,以Hadoop為例,首先,分析該類應用的執(zhí)行方式,發(fā)現(xiàn)數(shù)據量、節(jié)點數(shù)和任務數(shù)是影響其效率的主要因素;其次,探討以上因素對應用效率的影響;最后,通過實驗得出在數(shù)據量一定的情況下,增加節(jié)點數(shù)不會明顯提高應用的執(zhí)行效率,反而極大地增加執(zhí)行成本;當任務數(shù)接近節(jié)點數(shù)時,應用的執(zhí)行效率較高、成本較低。該結論為云環(huán)境中類似MapReduce的數(shù)據分布并行應用的效率優(yōu)化提供借鑒,并為用戶租用云資源提供參考。

下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- AI框架的分布式并行能力的分析和MindSpore的實踐一混合并行和自動并行
- AI框架的分布式并行能力的分析和MindSpore的實踐一混合并行和自動并行
- 云計算環(huán)境下的數(shù)據安全及其應用綜述 13次下載
- 云環(huán)境下HEDSM工作流調度策略綜述 6次下載
- 基于區(qū)塊鏈并行的以太坊數(shù)據快速導出工具 7次下載
- 基于分布式數(shù)據Cache的實時動態(tài)遷移機制 20次下載
- 如何解決多源數(shù)據融合分析過程靈活性差和處理效率低的問題方法說明 3次下載
- 使用相似連接進行多源數(shù)據并行預處理的方法概述 12次下載
- 如何在云計算環(huán)境下進行資源調度算法的研究 4次下載
- 云環(huán)境下如何使用運算電路進行同態(tài)認證的方案說明 3次下載
- 云環(huán)境下數(shù)據多副本安全共享 0次下載
- 基于云環(huán)境數(shù)據安全研究 0次下載
- 大數(shù)據環(huán)境下的分布式數(shù)據流處理關鍵技術探析 0次下載
- 虛擬化環(huán)境下多GPU并行計算研究 0次下載
- KeyNote系統(tǒng)實現(xiàn)分布式環(huán)境下的授權
- LED失效分析重要手段——光熱分布檢測 739次閱讀
- 無線終端ZWS云應用(二)—DTU 云的環(huán)境監(jiān)測行業(yè)應用 815次閱讀
- 基于PyTorch的模型并行分布式訓練Megatron解析 5.5k次閱讀
- 大模型分布式訓練并行技術(一)-概述 2.5k次閱讀
- 旋轉環(huán)境下基于FPGA的多通道數(shù)據采集系統(tǒng)設計 2.1k次閱讀
- 高效率升壓轉換器搶奪并行端口 1.2k次閱讀
- 云存儲環(huán)境下的容災有哪一些關鍵的技術 1.2k次閱讀
- 分布式工業(yè)物聯(lián)網云平臺是怎樣的 2k次閱讀
- 影響B(tài)UCK電源效率的因素有哪些 1.9w次閱讀
- 淺析影響功率型LED封裝取光效率的四個因素 4.8k次閱讀
- 如何使用云存儲 3w次閱讀
- 云計算平臺下僵尸網絡的檢測技術詳解 3.5k次閱讀
- 并行計算和分布式計算的區(qū)別和聯(lián)系 3.8w次閱讀
- 大數(shù)據環(huán)境下的綜合布線技術探析 1.5k次閱讀
- 物聯(lián)網環(huán)境下的云存儲安全技術研究 834次閱讀
下載排行
本周
- 1新一代網絡可視化(NPB 2.0)
- 3.40 MB | 1次下載 | 免費
- 2冷柜-電氣控制系統(tǒng)講解
- 13.68 MB | 1次下載 | 10 積分
- 3MDD品牌三極管MMBT3906數(shù)據手冊
- 2.33 MB | 次下載 | 免費
- 4MDD品牌三極管S9012數(shù)據手冊
- 2.62 MB | 次下載 | 免費
- 5收音環(huán)繞擴音機 AVR-1507手冊
- 2.50 MB | 次下載 | 免費
- 624Pin Type-C連接器設計報告
- 1.06 MB | 次下載 | 免費
- 7MS1000TA 超聲波測量模擬前端芯片技術手冊
- 0.60 MB | 次下載 | 免費
- 8MS1022高精度時間測量(TDC)電路數(shù)據手冊
- 1.81 MB | 次下載 | 免費
本月
- 1愛華AIWA HS-J202維修手冊
- 3.34 MB | 37次下載 | 免費
- 2PC5502負載均流控制電路數(shù)據手冊
- 1.63 MB | 23次下載 | 免費
- 3NB-IoT芯片廠商的資料說明
- 0.31 MB | 22次下載 | 1 積分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供電電路圖資料
- 0.63 MB | 6次下載 | 1 積分
- 5UWB653Pro USB口測距通信定位模塊規(guī)格書
- 838.47 KB | 5次下載 | 免費
- 6技嘉H110主板IT8628E_BX IO電路圖資料
- 2.61 MB | 4次下載 | 1 積分
- 7蘇泊爾DCL6907(即CHK-S007)單芯片電磁爐原理圖資料
- 0.04 MB | 4次下載 | 1 積分
- 8100W準諧振反激式恒流電源電路圖資料
- 0.09 MB | 2次下載 | 1 積分
總榜
- 1matlab軟件下載入口
- 未知 | 935137次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191439次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183353次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81602次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73822次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65991次下載 | 10 積分
電子發(fā)燒友App





創(chuàng)作
發(fā)文章
發(fā)帖
提問
發(fā)資料
發(fā)視頻
上傳資料賺積分
評論