電子發(fā)燒友App
創(chuàng)作
發(fā)文章
發(fā)帖 
提問 
發(fā)資料
發(fā)視頻資料介紹
針對Spark數(shù)據(jù)集不可變，以及Java虛擬機（JVM）依賴環(huán)境引起的代碼執(zhí)行、內(nèi)存管理、數(shù)據(jù)序列化／反序列化等開銷過多的不足，采用C/C++語言，設計并實現(xiàn)了一種輕量級的大數(shù)據(jù)運算系統(tǒng)-Helius。Helius支持Spark的基本操作，同時允許數(shù)據(jù)集整體修改；同時，Helius利用C/C++優(yōu)化內(nèi)存管理和網(wǎng)絡傳輸，并采用stateless worker機制簡化分布式計算平臺的容錯恢復過程。實驗結(jié)果顯示：5次迭代中，Helius運行PageRank算法的時間僅為Spark的25. 12% - 53. 14%，運行TPCH Q6的時間僅為Spark的57. 37%；在PageRank迭代1次的基礎上，運行在Helius系統(tǒng)下時，master節(jié)點IP接收和發(fā)送數(shù)據(jù)量約為運行于Spark系統(tǒng)的40%和15%，而且200 s的運行過程中，Helius占用的總內(nèi)存約為Spark的25%。實驗結(jié)果與分析表明，與Spark相比，Helius具有節(jié)約內(nèi)存、不需要序列化和反序列化、減少網(wǎng)絡交互以及容錯簡單等優(yōu)點。
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 輕量級的SDN數(shù)據(jù)包轉(zhuǎn)發(fā)驗證方案 10次下載
- 基于Feistel結(jié)構(gòu)的超輕量級分組密碼算法 4次下載
- 基于輕量級虛擬化的LDDoS仿真攻防方法 6次下載
- 輕量級分布式機器學習系統(tǒng)及算法 16次下載
- 基于YOLO改進的輕量級交通標識檢測模型 12次下載
- 一種逐層分組卷積并構(gòu)建輕量級網(wǎng)絡結(jié)構(gòu)SKASNet 10次下載
- 一種輕量級時間卷積網(wǎng)絡設計方案 6次下載
- 基于位重排變換的超輕量級RFID雙向認證協(xié)議 2次下載
- Protothreads極輕量級系統(tǒng)的詳細資料簡介
- 輕量級協(xié)議棧LWIP如何進行分析與改進 5次下載
- 一種超輕量級群組射頻識別標簽所有權(quán)轉(zhuǎn)移協(xié)議 1次下載
- 一種輕量級的大數(shù)據(jù)分析系統(tǒng) 10次下載
- 輕量級RFID安全協(xié)議 22次下載
- 一種嵌入式Linux輕量級GUI系統(tǒng)設計
- 一種嵌入式Linux輕量級GUI系統(tǒng)設計
- 基于Openharmony輕量級操作系統(tǒng)的分布式數(shù)據(jù)管理開發(fā)案例 1012次閱讀
- Linux輕量級工具集合Busybox的特點和使用 1448次閱讀
- 一個輕量級的權(quán)限認證框架：Sa-Token 2203次閱讀
- 分享一個適合單片機的輕量級日志庫 1593次閱讀
- 一個純Python編寫的輕量級數(shù)據(jù)庫 856次閱讀
- 針對單片機開發(fā)的輕量級OTA組件 1427次閱讀
- TinyDB輕量級數(shù)據(jù)庫有哪些特點呢 1503次閱讀
- 一款適合初學者超輕量級C語言網(wǎng)絡庫—Dyad 2015次閱讀
- 輕量級Kubernetes-K3S工具介紹 2527次閱讀
- 一種基于智慧運營平臺，將大數(shù)據(jù)技術(shù)和數(shù)據(jù)挖掘技術(shù)相結(jié)合 7481次閱讀
- 一種網(wǎng)絡大數(shù)據(jù)協(xié)作融合算法 4484次閱讀
- 全球首款輕量級機械臂已經(jīng)出現(xiàn)了！ 7535次閱讀
- 谷歌開源TFGAN輕量級的工具庫 目的是讓訓練和評估GAN變得更加簡單 4963次閱讀
- 谷歌開發(fā)一個輕量級的庫——TFGAN 它可以讓生成對抗網(wǎng)絡更易于實驗 5541次閱讀
- 一種AES密碼算法的實現(xiàn) 3174次閱讀
上傳資料賺積分下載排行
本周
- 148V到5KW無橋LLC雙向逆變器的電路原理圖免費下載
- 0.26 MB | 154次下載 | 10 積分
- 22KW逆變側(cè)功率管的損耗如何進行計算詳細公式免費下載
- 0.40 MB | 32次下載 | 2 積分
- 3高功率密度碳化硅MOSFET軟開關(guān)三相逆變器損耗分析
- 2.27 MB | 30次下載 | 5 積分
- 4S7-200 可編程序控制器系統(tǒng)手冊
- 12.81 MB | 4次下載 | 免費
- 5ATX電源 FSP_ATX-300PAF電路圖資料
- 0.18 MB | 1次下載 | 2 積分
- 6IP6541_L 150uA 低功耗，集成多種快充輸出協(xié)議中文資料
- 1.43 MB | 次下載 | 免費
- 7PC5010 單通道20V_10A低邊高速驅(qū)動器技術(shù)手冊
- 1.17 MB | 次下載 | 免費
- 8GSV2201D 帶嵌入式MCU的DisplayPort 1.4到HDMI 2.0轉(zhuǎn)換器規(guī)格書
- 0.67 MB | 次下載 | 2 積分
本月
- 148V到5KW無橋LLC雙向逆變器的電路原理圖免費下載
- 0.26 MB | 154次下載 | 10 積分
- 22KW逆變側(cè)功率管的損耗如何進行計算詳細公式免費下載
- 0.40 MB | 32次下載 | 2 積分
- 3高功率密度碳化硅MOSFET軟開關(guān)三相逆變器損耗分析
- 2.27 MB | 30次下載 | 5 積分
- 4STM32F10x參考手冊資料
- 13.64 MB | 12次下載 | 1 積分
- 5OAH0428 V1.0英文規(guī)格書
- 5.86 MB | 8次下載 | 免費
- 6光伏并網(wǎng)逆變器原理
- 7.31 MB | 6次下載 | 2 積分
- 7NS1081/NS1081S/NS1081Q USB 3.0閃存數(shù)據(jù)手冊
- 0.40 MB | 4次下載 | 2 積分
- 8S7-200 可編程序控制器系統(tǒng)手冊
- 12.81 MB | 4次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935132次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設計
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191422次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183352次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81600次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73818次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65990次下載 | 10 積分
工商網(wǎng)監(jiān)
評論