資料介紹
云環(huán)境下,類似MapReduce的數(shù)據(jù)分布并行應(yīng)用被廣泛運(yùn)用。針對此類應(yīng)用執(zhí)行效率低、成本高的問題,以Hadoop為例,首先,分析該類應(yīng)用的執(zhí)行方式,發(fā)現(xiàn)數(shù)據(jù)量、節(jié)點(diǎn)數(shù)和任務(wù)數(shù)是影響其效率的主要因素;其次,探討以上因素對應(yīng)用效率的影響;最后,通過實(shí)驗(yàn)得出在數(shù)據(jù)量一定的情況下,增加節(jié)點(diǎn)數(shù)不會明顯提高應(yīng)用的執(zhí)行效率,反而極大地增加執(zhí)行成本;當(dāng)任務(wù)數(shù)接近節(jié)點(diǎn)數(shù)時,應(yīng)用的執(zhí)行效率較高、成本較低。該結(jié)論為云環(huán)境中類似MapReduce的數(shù)據(jù)分布并行應(yīng)用的效率優(yōu)化提供借鑒,并為用戶租用云資源提供參考。

- AI框架的分布式并行能力的分析和MindSpore的實(shí)踐一混合并行和自動并行
- AI框架的分布式并行能力的分析和MindSpore的實(shí)踐一混合并行和自動并行
- 云計算環(huán)境下的數(shù)據(jù)安全及其應(yīng)用綜述 13次下載
- 基于區(qū)塊鏈并行的以太坊數(shù)據(jù)快速導(dǎo)出工具 7次下載
- 基于分布式數(shù)據(jù)Cache的實(shí)時動態(tài)遷移機(jī)制 20次下載
- HPEC應(yīng)用子程序線程推測并行性實(shí)驗(yàn)分析 8次下載
- 如何解決多源數(shù)據(jù)融合分析過程靈活性差和處理效率低的問題方法說明 3次下載
- 使用相似連接進(jìn)行多源數(shù)據(jù)并行預(yù)處理的方法概述 12次下載
- 如何在云計算環(huán)境下進(jìn)行資源調(diào)度算法的研究 4次下載
- 云環(huán)境下如何使用運(yùn)算電路進(jìn)行同態(tài)認(rèn)證的方案說明 3次下載
- 云環(huán)境下數(shù)據(jù)多副本安全共享 0次下載
- 基于云環(huán)境數(shù)據(jù)安全研究 0次下載
- 大數(shù)據(jù)環(huán)境下的分布式數(shù)據(jù)流處理關(guān)鍵技術(shù)探析 0次下載
- 虛擬化環(huán)境下多GPU并行計算研究 0次下載
- KeyNote系統(tǒng)實(shí)現(xiàn)分布式環(huán)境下的授權(quán)
- LED失效分析重要手段——光熱分布檢測 73次閱讀
- 無線終端ZWS云應(yīng)用(二)—DTU 云的環(huán)境監(jiān)測行業(yè)應(yīng)用 279次閱讀
- 基于PyTorch的模型并行分布式訓(xùn)練Megatron解析 3192次閱讀
- 大模型分布式訓(xùn)練并行技術(shù)(一)-概述 1531次閱讀
- 旋轉(zhuǎn)環(huán)境下基于FPGA的多通道數(shù)據(jù)采集系統(tǒng)設(shè)計 1164次閱讀
- 高效率升壓轉(zhuǎn)換器搶奪并行端口 637次閱讀
- 云存儲環(huán)境下的容災(zāi)有哪一些關(guān)鍵的技術(shù) 957次閱讀
- 分布式工業(yè)物聯(lián)網(wǎng)云平臺是怎樣的 1742次閱讀
- 影響B(tài)UCK電源效率的因素有哪些 1.8w次閱讀
- 淺析影響功率型LED封裝取光效率的四個因素 4461次閱讀
- 如何使用云存儲 2.9w次閱讀
- 云計算平臺下僵尸網(wǎng)絡(luò)的檢測技術(shù)詳解 3138次閱讀
- 并行計算和分布式計算的區(qū)別和聯(lián)系 3.6w次閱讀
- 大數(shù)據(jù)環(huán)境下的綜合布線技術(shù)探析 1359次閱讀
- 物聯(lián)網(wǎng)環(huán)境下的云存儲安全技術(shù)研究 724次閱讀
下載排行
本周
- 1FS313B USB 的 PD和QC 快充協(xié)議電壓誘騙控制器規(guī)格書
- 2.61 MB | 3次下載 | 免費(fèi)
- 2FS312B USB的PD和OC快充協(xié)議電壓誘騙控制器規(guī)格書
- 1.35 MB | 1次下載 | 免費(fèi)
- 3SIP協(xié)議和私有協(xié)議廣播區(qū)別
- 1.28 MB | 1次下載 | 免費(fèi)
- 4ES2B SMA快恢復(fù)二極管規(guī)格書
- 0.75 MB | 次下載 | 免費(fèi)
- 5SM18512PS明微LED驅(qū)動芯片規(guī)格書
- 0.49 MB | 次下載 | 免費(fèi)
- 6SM16803PB 景觀裝飾驅(qū)動 IC規(guī)格書
- 0.94 MB | 次下載 | 免費(fèi)
- 7HJ56-380V5A 麻電機(jī)5代、高頻5代電流源 說明書
- 645.02 KB | 次下載 | 免費(fèi)
- 8AR273系列全極霍爾開關(guān)技術(shù)手冊
- 6.57 MB | 次下載 | 免費(fèi)
本月
- 1PFC電路與BOOST電路設(shè)計實(shí)例分享
- 1.83 MB | 18次下載 | 4 積分
- 2電源測試報告-基于 國民技術(shù) N32L406 和杰華特 JW3376+3330 的 BMS 方案
- 6.47 MB | 17次下載 | 免費(fèi)
- 3世平基于靈動微 SPIN560C 的低壓無刷電機(jī)應(yīng)用方案
- 10.93 MB | 11次下載 | 免費(fèi)
- 4HAL9303線性霍爾效應(yīng)傳感器技術(shù)手冊
- 0.70 MB | 9次下載 | 免費(fèi)
- 5電流檢測芯片F(xiàn)P135應(yīng)用說明
- 1.24 MB | 8次下載 | 免費(fèi)
- 6900MHz全雙工無線發(fā)射器參考設(shè)計原理圖資料
- 0.40 MB | 5次下載 | 免費(fèi)
- 7DH1766系列·三路可編程直流電源技術(shù)手冊
- 1.93 MB | 4次下載 | 免費(fèi)
- 8FS313B USB 的 PD和QC 快充協(xié)議電壓誘騙控制器規(guī)格書
- 2.61 MB | 3次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935134次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191424次下載 | 10 積分
- 5十天學(xué)會AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183352次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81601次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73818次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65991次下載 | 10 積分
電子發(fā)燒友App






創(chuàng)作
發(fā)文章
發(fā)帖
提問
發(fā)資料
發(fā)視頻
上傳資料賺積分
評論