MLReef 是一個(gè) ML/DL 開(kāi)發(fā)平臺(tái)，包含四個(gè)主要部分：

• 數(shù)據(jù)管理?—— 完全版本化的數(shù)據(jù)準(zhǔn)備和處理基礎(chǔ)設(shè)施；
• 發(fā)布代碼庫(kù)?—— 容器化和版本化的腳本存儲(chǔ)庫(kù)，用于數(shù)據(jù)管道中的不可變用途
• 實(shí)驗(yàn)管理器?—— 實(shí)驗(yàn)跟蹤、環(huán)境和結(jié)果
• ML-Ops?——?ML/DL 作業(yè)的管道和編排解決方案

MLReef 架構(gòu)

ML 生命周期中的 MLReef ML 組件：

• 當(dāng)前基于 Git 和 Git LFS 的數(shù)據(jù)存儲(chǔ)組件。
• 基于工作模塊（由社區(qū)或您的團(tuán)隊(duì)發(fā)布）、數(shù)據(jù)管理、數(shù)據(jù)處理/數(shù)據(jù)可視化/托管或本地實(shí)驗(yàn)管道以及模型管理的模型開(kāi)發(fā)。
• ML-Ops 編排、實(shí)驗(yàn)和工作流可重復(fù)性以及可擴(kuò)展性。

MLReef 是我們與機(jī)器學(xué)習(xí)/深度學(xué)習(xí)領(lǐng)域中無(wú)數(shù)其他研究人員和開(kāi)發(fā)人員共同解決的一個(gè)問(wèn)題的解決方案：訓(xùn)練生產(chǎn)級(jí)深度學(xué)習(xí)模型是一個(gè)復(fù)雜的過(guò)程。MLReef 通過(guò)關(guān)聯(lián)代碼版本控制、研究項(xiàng)目、性能指標(biāo)和模型來(lái)源來(lái)跟蹤和控制過(guò)程。

我們根據(jù)最佳數(shù)據(jù)科學(xué)實(shí)踐設(shè)計(jì)了 MLReef，并結(jié)合了從 DevOps 中獲得的知識(shí)以及對(duì)協(xié)作的高度關(guān)注。

• 每天使用它來(lái)促進(jìn)團(tuán)隊(duì)中的協(xié)作和可見(jiàn)性
• 只需單擊一下按鈕，即可從任何代碼存儲(chǔ)庫(kù)在云中創(chuàng)建作業(yè)
• 自動(dòng)化流程并創(chuàng)建管道以收集您的實(shí)驗(yàn)日志、輸出和數(shù)據(jù)
• 通過(guò)在 MLReef 平臺(tái)上對(duì)所有內(nèi)容進(jìn)行編目，使您的 ML 生命周期變得透明