資料介紹
針對(duì)構(gòu)建大規(guī)模機(jī)器學(xué)習(xí)系統(tǒng)在可擴(kuò)展性、算法收斂性能、運(yùn)行效率等方面面臨的問(wèn)題,分析了大規(guī)模樣本、模型和網(wǎng)絡(luò)通信給機(jī)器學(xué)習(xí)系統(tǒng)帶來(lái)的挑戰(zhàn)和現(xiàn)有系統(tǒng)的應(yīng)對(duì)方案。以隱含狄利克雷分布( LDA)模型為例,通過(guò)對(duì)比三款開(kāi)源分布式LDA系統(tǒng)-Spark LDA、PLDA+和LightLDA,在系統(tǒng)資源消耗、算法收斂性能和可擴(kuò)展性等方面的表現(xiàn),分析各系統(tǒng)在設(shè)計(jì)、實(shí)現(xiàn)和性能上的差異。實(shí)驗(yàn)結(jié)果表明:面對(duì)小規(guī)模的樣本集和模型,LightLDA與PLDA+的內(nèi)存使用量約為Spark LDA的一半,系統(tǒng)收斂速度為Spark LDA的4至5倍;面對(duì)較大規(guī)模的樣本集和模型,LightLDA的網(wǎng)絡(luò)通信總量與系統(tǒng)收斂時(shí)間遠(yuǎn)小于PLDA+與SparkLDA,展現(xiàn)出良好的可擴(kuò)展性?!皵?shù)據(jù)并行+模型并行”的體系結(jié)構(gòu)能有效應(yīng)對(duì)大規(guī)模樣本和模型的挑戰(zhàn);參數(shù)弱同步策略( SSP)、模型本地緩存機(jī)制和參數(shù)稀疏存儲(chǔ)能有效降低網(wǎng)絡(luò)開(kāi)銷(xiāo),提升系統(tǒng)運(yùn)行效率。

掃碼添加小助手
加入工程師交流群
- 測(cè)量系統(tǒng)分析 1次下載
- 分布式電源對(duì)配電系統(tǒng)的影響分析
- 輕量級(jí)分布式機(jī)器學(xué)習(xí)系統(tǒng)及算法 16次下載
- 系統(tǒng)分析用戶指南(英文版) 0次下載
- 系統(tǒng)分析方法 0次下載
- 集中_分布混合式熱電發(fā)電系統(tǒng)分布式MPPT控制方法 0次下載
- 嵌入式實(shí)時(shí)操作系統(tǒng)分析 10次下載
- 2.電力系統(tǒng)分析題庫(kù)(共8頁(yè)) 24次下載
- 基于SVPWM的變頻系統(tǒng)分析設(shè)計(jì) 10次下載
- 基于MATLAB的系統(tǒng)分析與設(shè)計(jì)信號(hào)處理 32次下載
- 基于MATLAB的系統(tǒng)分析與設(shè)計(jì)時(shí)頻分析 16次下載
- 自行小車(chē)的PLC控制系統(tǒng)分析
- 基于VXI總線的分布式中央定時(shí)觸發(fā)系統(tǒng)
- 系統(tǒng)分析ppt 0次下載
- 指令系統(tǒng)分析
- Ceph分布式存儲(chǔ)系統(tǒng)解析 828次閱讀
- 分布式SCADA系統(tǒng)的特點(diǎn)的組成 1.4k次閱讀
- 單端口網(wǎng)絡(luò)S參數(shù)測(cè)量系統(tǒng)分析 1.3k次閱讀
- Java手寫(xiě)分布式鎖的實(shí)現(xiàn) 1.3k次閱讀
- tldb提供分布式鎖使用方法 1.7k次閱讀
- 如何使用分布式存儲(chǔ)系統(tǒng)促進(jìn)AI模型訓(xùn)練 1.3k次閱讀
- 利用NI VeriStand 2010實(shí)現(xiàn)分布式同步系統(tǒng)的設(shè)計(jì) 4.1k次閱讀
- 詳談分布式系統(tǒng)的定義及屬性 4.6k次閱讀
- 分布式控制系統(tǒng)的介紹 6.1k次閱讀
- 阿里開(kāi)源大規(guī)模分布式圖學(xué)習(xí)框架:專為Graph嵌入,無(wú)縫對(duì)接TF/PyTorch 4k次閱讀
- 存儲(chǔ)分布式系統(tǒng)中如何從CAP轉(zhuǎn)到PACELC 3k次閱讀
- 分布式存儲(chǔ)運(yùn)維系統(tǒng)構(gòu)架簡(jiǎn)析 2.9k次閱讀
- 深度解讀分布式存儲(chǔ)技術(shù)之分布式剪枝系統(tǒng) 2.2k次閱讀
- 智能電網(wǎng)分布式能源系統(tǒng)微型電網(wǎng)技術(shù)分析 1.1k次閱讀
- 基于CAN總線的分布式網(wǎng)架健康狀態(tài)監(jiān)測(cè)系統(tǒng)的設(shè)計(jì) 1.3k次閱讀
下載排行
本周
- 1MDD品牌三極管MMBT3906數(shù)據(jù)手冊(cè)
- 2.33 MB | 次下載 | 免費(fèi)
- 2MDD品牌三極管S9012數(shù)據(jù)手冊(cè)
- 2.62 MB | 次下載 | 免費(fèi)
- 3聯(lián)想flex2-14D/15D說(shuō)明書(shū)
- 4.92 MB | 次下載 | 免費(fèi)
- 4收音環(huán)繞擴(kuò)音機(jī) AVR-1507手冊(cè)
- 2.50 MB | 次下載 | 免費(fèi)
- 524Pin Type-C連接器設(shè)計(jì)報(bào)告
- 1.06 MB | 次下載 | 免費(fèi)
- 6新一代網(wǎng)絡(luò)可視化(NPB 2.0)
- 3.40 MB | 次下載 | 免費(fèi)
- 7MS1000TA 超聲波測(cè)量模擬前端芯片技術(shù)手冊(cè)
- 0.60 MB | 次下載 | 免費(fèi)
- 8MS1022高精度時(shí)間測(cè)量(TDC)電路數(shù)據(jù)手冊(cè)
- 1.81 MB | 次下載 | 免費(fèi)
本月
- 1愛(ài)華AIWA HS-J202維修手冊(cè)
- 3.34 MB | 37次下載 | 免費(fèi)
- 2PC5502負(fù)載均流控制電路數(shù)據(jù)手冊(cè)
- 1.63 MB | 23次下載 | 免費(fèi)
- 3NB-IoT芯片廠商的資料說(shuō)明
- 0.31 MB | 22次下載 | 1 積分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供電電路圖資料
- 0.63 MB | 6次下載 | 1 積分
- 5UWB653Pro USB口測(cè)距通信定位模塊規(guī)格書(shū)
- 838.47 KB | 5次下載 | 免費(fèi)
- 6技嘉H110主板IT8628E_BX IO電路圖資料
- 2.61 MB | 4次下載 | 1 積分
- 7蘇泊爾DCL6907(即CHK-S007)單芯片電磁爐原理圖資料
- 0.04 MB | 4次下載 | 1 積分
- 8100W準(zhǔn)諧振反激式恒流電源電路圖資料
- 0.09 MB | 2次下載 | 1 積分
總榜
- 1matlab軟件下載入口
- 未知 | 935137次下載 | 10 積分
- 2開(kāi)源硬件-PMP21529.1-4 開(kāi)關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計(jì)
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191439次下載 | 10 積分
- 5十天學(xué)會(huì)AVR單片機(jī)與C語(yǔ)言視頻教程 下載
- 158M | 183353次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81602次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73822次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65991次下載 | 10 積分
電子發(fā)燒友App





創(chuàng)作
發(fā)文章
發(fā)帖
提問(wèn)
發(fā)資料
發(fā)視頻
上傳資料賺積分
評(píng)論