資料介紹
云環(huán)境下,類似MapReduce的數(shù)據(jù)分布并行應(yīng)用被廣泛運(yùn)用。針對此類應(yīng)用執(zhí)行效率低、成本高的問題,以Hadoop為例,首先,分析該類應(yīng)用的執(zhí)行方式,發(fā)現(xiàn)數(shù)據(jù)量、節(jié)點(diǎn)數(shù)和任務(wù)數(shù)是影響其效率的主要因素;其次,探討以上因素對應(yīng)用效率的影響;最后,通過實(shí)驗(yàn)得出在數(shù)據(jù)量一定的情況下,增加節(jié)點(diǎn)數(shù)不會明顯提高應(yīng)用的執(zhí)行效率,反而極大地增加執(zhí)行成本;當(dāng)任務(wù)數(shù)接近節(jié)點(diǎn)數(shù)時,應(yīng)用的執(zhí)行效率較高、成本較低。該結(jié)論為云環(huán)境中類似MapReduce的數(shù)據(jù)分布并行應(yīng)用的效率優(yōu)化提供借鑒,并為用戶租用云資源提供參考。
- AI框架的分布式并行能力的分析和MindSpore的實(shí)踐一混合并行和自動并行
- AI框架的分布式并行能力的分析和MindSpore的實(shí)踐一混合并行和自動并行
- 云計(jì)算環(huán)境下的數(shù)據(jù)安全及其應(yīng)用綜述 13次下載
- 基于區(qū)塊鏈并行的以太坊數(shù)據(jù)快速導(dǎo)出工具 7次下載
- 基于分布式數(shù)據(jù)Cache的實(shí)時動態(tài)遷移機(jī)制 20次下載
- HPEC應(yīng)用子程序線程推測并行性實(shí)驗(yàn)分析 8次下載
- 如何解決多源數(shù)據(jù)融合分析過程靈活性差和處理效率低的問題方法說明 3次下載
- 使用相似連接進(jìn)行多源數(shù)據(jù)并行預(yù)處理的方法概述 12次下載
- 如何在云計(jì)算環(huán)境下進(jìn)行資源調(diào)度算法的研究 4次下載
- 云環(huán)境下如何使用運(yùn)算電路進(jìn)行同態(tài)認(rèn)證的方案說明 3次下載
- 云環(huán)境下數(shù)據(jù)多副本安全共享 0次下載
- 基于云環(huán)境數(shù)據(jù)安全研究 0次下載
- 大數(shù)據(jù)環(huán)境下的分布式數(shù)據(jù)流處理關(guān)鍵技術(shù)探析 0次下載
- 虛擬化環(huán)境下多GPU并行計(jì)算研究 0次下載
- KeyNote系統(tǒng)實(shí)現(xiàn)分布式環(huán)境下的授權(quán)
- LED失效分析重要手段——光熱分布檢測 73次閱讀
- 無線終端ZWS云應(yīng)用(二)—DTU 云的環(huán)境監(jiān)測行業(yè)應(yīng)用 279次閱讀
- 基于PyTorch的模型并行分布式訓(xùn)練Megatron解析 3192次閱讀
- 大模型分布式訓(xùn)練并行技術(shù)(一)-概述 1531次閱讀
- 旋轉(zhuǎn)環(huán)境下基于FPGA的多通道數(shù)據(jù)采集系統(tǒng)設(shè)計(jì) 1164次閱讀
- 高效率升壓轉(zhuǎn)換器搶奪并行端口 637次閱讀
- 云存儲環(huán)境下的容災(zāi)有哪一些關(guān)鍵的技術(shù) 957次閱讀
- 分布式工業(yè)物聯(lián)網(wǎng)云平臺是怎樣的 1742次閱讀
- 影響B(tài)UCK電源效率的因素有哪些 1.8w次閱讀
- 淺析影響功率型LED封裝取光效率的四個因素 4461次閱讀
- 如何使用云存儲 2.9w次閱讀
- 云計(jì)算平臺下僵尸網(wǎng)絡(luò)的檢測技術(shù)詳解 3138次閱讀
- 并行計(jì)算和分布式計(jì)算的區(qū)別和聯(lián)系 3.6w次閱讀
- 大數(shù)據(jù)環(huán)境下的綜合布線技術(shù)探析 1359次閱讀
- 物聯(lián)網(wǎng)環(huán)境下的云存儲安全技術(shù)研究 724次閱讀
下載排行
本周
- 1GD選型手冊
- 6.92 MB | 2次下載 | 免費(fèi)
- 2電流檢測芯片F(xiàn)P135應(yīng)用說明
- 1.24 MB | 2次下載 | 免費(fèi)
- 3吸波材料在NFC中的應(yīng)用
- 0.91 MB | 1次下載 | 免費(fèi)
- 4HC88L051F4低功耗芯片規(guī)格書
- 4.76 MB | 1次下載 | 免費(fèi)
- 5CIU32D655x5數(shù)據(jù)手冊
- 2.14 MB | 1次下載 | 免費(fèi)
- 6400毫安可用太陽能供電的單節(jié)鋰電池充電管理集成電路CN3142技術(shù)手冊
- 0.47 MB | 次下載 | 免費(fèi)
- 7導(dǎo)熱吸波材料在路由器上的應(yīng)用
- 0.38 MB | 次下載 | 免費(fèi)
- 8PC0403A 18V 3A高效率小尺寸降壓電源模塊技術(shù)手冊
- 1.42 MB | 次下載 | 免費(fèi)
本月
- 1常用電子元器件使用手冊
- 2.40 MB | 41次下載 | 免費(fèi)
- 2高功率密度碳化硅MOSFET軟開關(guān)三相逆變器損耗分析
- 2.27 MB | 33次下載 | 10 積分
- 3USB拓展塢PCB圖資料
- 0.57 MB | 9次下載 | 免費(fèi)
- 4HAL9303線性霍爾效應(yīng)傳感器技術(shù)手冊
- 0.70 MB | 9次下載 | 免費(fèi)
- 5MS1826 HDMI 多功能視頻處理器數(shù)據(jù)手冊
- 4.51 MB | 8次下載 | 免費(fèi)
- 6經(jīng)典1000W純正弦波逆變器原理圖資料
- 0.08 MB | 8次下載 | 10 積分
- 7TYPEC電路原理圖資料
- 0.14 MB | 7次下載 | 免費(fèi)
- 8SR520-SR5100肖特基二極管規(guī)格書
- 0.11 MB | 4次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935134次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計(jì)
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191424次下載 | 10 積分
- 5十天學(xué)會AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183352次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81600次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73818次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65991次下載 | 10 積分
評論