chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

使用聯(lián)合學(xué)習(xí)橋接金融服務(wù)中的數(shù)據(jù)孤島

星星科技指導(dǎo)員 ? 來源:NVIDIA ? 作者:Annika Brundyn ? 2022-10-10 16:34 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

機(jī)器學(xué)習(xí)( ML )過程中,無法確保數(shù)據(jù)隱私,這往往阻礙了人工智能AI )在金融服務(wù)中充分發(fā)揮潛力。例如,傳統(tǒng)的 ML 方法假設(shè)所有數(shù)據(jù)都可以移動到中央存儲庫。

在處理數(shù)據(jù)主權(quán)和安全考慮或個人識別信息等敏感數(shù)據(jù)時,這是一個不切實(shí)際的假設(shè)。更實(shí)際地說,它忽略了數(shù)據(jù)出口挑戰(zhàn)和創(chuàng)建大型池數(shù)據(jù)集的巨大成本。

對于訓(xùn)練 ML 模型有價值的大量內(nèi)部數(shù)據(jù)集仍然沒有使用。金融服務(wù)行業(yè)的公司如何利用自己的數(shù)據(jù),同時確保隱私和安全?

這篇文章介紹了聯(lián)合學(xué)習(xí),并解釋了它對處理敏感數(shù)據(jù)集的企業(yè)的好處。我們介紹了在金融服務(wù)中使用聯(lián)邦學(xué)習(xí)的三種方法,并提供了關(guān)于今天開始的提示。

什么是聯(lián)合學(xué)習(xí)

聯(lián)合學(xué)習(xí)是一種 ML 技術(shù),它可以從多個孤立的數(shù)據(jù)集中提取見解,而無需共享數(shù)據(jù)或?qū)?shù)據(jù)移動到中央存儲庫或服務(wù)器中。

例如,假設(shè)您有多個要用于訓(xùn)練 AI 模型的數(shù)據(jù)集。今天的標(biāo)準(zhǔn) ML 方法要求首先在一個地方收集所有訓(xùn)練數(shù)據(jù)。然而,對于世界上許多敏感的數(shù)據(jù)來說,這種方法是不可行的。這使得許多數(shù)據(jù)集和用例無法應(yīng)用人工智能技術(shù)。

另一方面,聯(lián)合學(xué)習(xí)并不假設(shè)可以創(chuàng)建一個統(tǒng)一的數(shù)據(jù)集。而是將分布式訓(xùn)練數(shù)據(jù)集留在原地。

該方法包括創(chuàng)建模型的多個版本,并將一個版本發(fā)送到數(shù)據(jù)集所在的每個服務(wù)器或設(shè)備。每個站點(diǎn)在其數(shù)據(jù)子集上本地訓(xùn)練模型,然后僅將模型參數(shù)發(fā)送回中央服務(wù)器。這是聯(lián)合學(xué)習(xí)的關(guān)鍵特性:只共享模型更新或參數(shù),而不共享訓(xùn)練數(shù)據(jù)本身。這保護(hù)了數(shù)據(jù)隱私和主權(quán)。

最后,中央服務(wù)器收集每個站點(diǎn)的所有更新,并智能地將“迷你模型”聚合為一個全局模型。該全局模型可以從整個數(shù)據(jù)集捕獲洞察,即使實(shí)際數(shù)據(jù)無法組合。

請注意,這些本地站點(diǎn)可以是服務(wù)器、智能手機(jī)等邊緣設(shè)備,或者任何可以在本地進(jìn)行訓(xùn)練并將模型更新發(fā)送回中央服務(wù)器的機(jī)器。

隱私保護(hù)技術(shù)的優(yōu)勢

醫(yī)療保健領(lǐng)域的大規(guī)模合作證明了多個獨(dú)立方使用聯(lián)合學(xué)習(xí)聯(lián)合訓(xùn)練人工智能模型的現(xiàn)實(shí)可行性。然而,聯(lián)合學(xué)習(xí)不僅僅是與外部合作伙伴合作。

在金融機(jī)構(gòu)中,我們看到了一個難以置信的機(jī)會,可以通過聯(lián)合學(xué)習(xí)來彌合內(nèi)部數(shù)據(jù)孤島。隨著企業(yè)為新產(chǎn)品收集所有可行數(shù)據(jù),包括推薦系統(tǒng)、欺詐檢測系統(tǒng)和呼叫中心分析,全公司的投資回報率可能會增加。

然而,隱私問題并不局限于金融數(shù)據(jù)。今天,全球范圍內(nèi)頒布的數(shù)據(jù)隱私立法浪潮(從歐洲的 GDPR 和加利福尼亞的 CCPA 開始,許多類似的法律即將出臺)只會持續(xù)一段時間 加速對隱私保護(hù) ML 技術(shù)的需求 在所有行業(yè)中。

預(yù)計聯(lián)邦學(xué)習(xí)將在未來幾年成為人工智能工具集的重要組成部分。

實(shí)際業(yè)務(wù)用例

ML 算法需要數(shù)據(jù)。此外, ML 模型的實(shí)際性能不僅取決于數(shù)量除了數(shù)據(jù)之外關(guān)聯(lián)對訓(xùn)練數(shù)據(jù)進(jìn)行分類。

許多組織可以通過合并新的數(shù)據(jù)集來改進(jìn)當(dāng)前的人工智能模型,這些數(shù)據(jù)集在不犧牲隱私的情況下無法輕松訪問。這就是聯(lián)邦學(xué)習(xí)的用武之地。

聯(lián)合學(xué)習(xí)使公司能夠利用新的數(shù)據(jù)資源,而無需數(shù)據(jù)共享。

大體上,聯(lián)邦學(xué)習(xí)支持三種類型的用例:

公司內(nèi)部:橋接內(nèi)部數(shù)據(jù)倉庫

公司間:促進(jìn)組織間的合作

邊緣計算:跨數(shù)千臺邊緣設(shè)備學(xué)習(xí)

公司內(nèi)部用例:利用孤立的內(nèi)部數(shù)據(jù)

單個公司可能依賴多個數(shù)據(jù)存儲解決方案的原因有很多。例如:

數(shù)據(jù)治理規(guī)則例如 GDPR 可能需要將數(shù)據(jù)保存在特定的地理位置,并指定保留和隱私策略。

并購來自合作伙伴公司的新數(shù)據(jù)。然而,將這些數(shù)據(jù)集成到現(xiàn)有存儲系統(tǒng)的艱巨任務(wù)往往會使數(shù)據(jù)長期分散。

兩者都是前提 和混合云使用存儲解決方案,移動大量數(shù)據(jù)的成本很高。

聯(lián)合學(xué)習(xí)使您的公司能夠跨不同業(yè)務(wù)組織、地理區(qū)域或數(shù)據(jù)倉庫中的孤立數(shù)據(jù)集利用 ML ,同時保護(hù)隱私和安全。

poYBAGND2S6AOxkUAAFQ9d5kl48909.jpg

圖 1.公司內(nèi)部聯(lián)合學(xué)習(xí)用例的工作流。聯(lián)邦服務(wù)器存儲全局模型并從客戶端節(jié)點(diǎn)接收參數(shù)。

公司間用例:與外部合作伙伴協(xié)作

收集足夠的定量數(shù)據(jù)來構(gòu)建強(qiáng)大的人工智能模型對于一家公司來說是困難的。假設(shè)一家保險公司正在構(gòu)建一個有效的欺詐檢測系統(tǒng)。該公司只能從觀察到的事件中收集數(shù)據(jù),如客戶提出索賠。然而,這些數(shù)據(jù)可能無法代表整個人群,因此可能會導(dǎo)致人工智能模型偏差。

為了構(gòu)建有效的欺詐檢測系統(tǒng),該公司需要更大的數(shù)據(jù)集和更多樣化的數(shù)據(jù)點(diǎn)來訓(xùn)練穩(wěn)健、可推廣的模型。許多組織可以從與其他組織共享數(shù)據(jù)中受益。實(shí)際上,大多數(shù)組織不會在通用超級計算機(jī)或云服務(wù)器上共享其專有數(shù)據(jù)集。

pYYBAGND2S-Ae5pOAAFMSBGGaxU743.jpg

圖 2.公司間聯(lián)合學(xué)習(xí)用例的工作流。聯(lián)邦服務(wù)器存儲全局模型并從客戶端節(jié)點(diǎn)接收參數(shù)。

為全行業(yè)的挑戰(zhàn)提供這種合作可以帶來巨大的好處。

例如 現(xiàn)實(shí)世界中最大的聯(lián)合協(xié)作之一 ,我們看到五大洲的 20 家獨(dú)立醫(yī)院訓(xùn)練了一個人工智能模型,用于預(yù)測新冠肺炎感染患者的氧氣需求。通過參與聯(lián)邦系統(tǒng),醫(yī)院的通用性平均提高了 38% ,模型性能提高了 16% 。

同樣,在信用卡網(wǎng)絡(luò)減少欺詐活動和銀行采取反洗錢舉措的同時,維護(hù)客戶隱私也是一個真正的機(jī)會。聯(lián)合學(xué)習(xí)增加了單個銀行可用的數(shù)據(jù),這有助于解決代理銀行的洗錢活動等問題。

邊緣計算:智能手機(jī)和物聯(lián)網(wǎng)

谷歌 最初于 2017 年引入聯(lián)邦學(xué)習(xí),以針對分布在數(shù)十億移動設(shè)備上的個人數(shù)據(jù)訓(xùn)練人工智能模型。 2022 年,更多的設(shè)備連接到互聯(lián)網(wǎng),包括智能手表、家庭助理、報警系統(tǒng)、恒溫器,甚至汽車。

聯(lián)邦學(xué)習(xí)對于不斷為 ML 模型收集有價值數(shù)據(jù)的各種邊緣設(shè)備都很有用,但這些數(shù)據(jù)通常對隱私敏感,數(shù)量大,或者兩者兼有,這會阻止登錄到數(shù)據(jù)中心。

聯(lián)合學(xué)習(xí)如何適應(yīng)現(xiàn)有的工作流程

需要注意的是,聯(lián)合學(xué)習(xí)是一種通用技術(shù)。聯(lián)合學(xué)習(xí)不僅僅是訓(xùn)練神經(jīng)網(wǎng)絡(luò);相反,它適用于數(shù)據(jù)分析、更傳統(tǒng)的 ML 方法或任何其他分布式工作流。

聯(lián)邦學(xué)習(xí)中很少有假設(shè),也許只有兩個值得一提: 1 )本地站點(diǎn)可以連接到中央服務(wù)器, 2 )每個站點(diǎn)都有最少的計算資源進(jìn)行本地培訓(xùn)。

除此之外,您還可以自由地使用自定義的本地和全局聚合行為設(shè)計自己的應(yīng)用程序。您可以決定對不同方的信任程度,以及與中央服務(wù)器共享的信任程度。聯(lián)邦系統(tǒng)可根據(jù)您的特定業(yè)務(wù)需求進(jìn)行配置。

例如,聯(lián)邦學(xué)習(xí)可以與其他隱私保護(hù)技術(shù)相結(jié)合,如差分隱私(增加噪聲)和同態(tài)加密(加密模型更新并模糊中央服務(wù)器看到的內(nèi)容)。

開始聯(lián)合學(xué)習(xí)

我們開發(fā)了一個 聯(lián)邦學(xué)習(xí)代碼示例 這展示了如何在對應(yīng)于兩個不同地理區(qū)域的信用卡交易數(shù)據(jù)集的兩個不同分割上訓(xùn)練全局欺詐預(yù)測模型。

關(guān)于作者

Annika Brundyn 是 NVIDIA 的解決方案架構(gòu)師。她從嵌入式系統(tǒng)計算機(jī)視覺開始工作,現(xiàn)在正在為金融服務(wù)開發(fā)聯(lián)邦學(xué)習(xí)和圖形神經(jīng)網(wǎng)絡(luò)。此前,安妮卡在紐約大學(xué)獲得了數(shù)據(jù)科學(xué)碩士學(xué)位,她在那里從事手術(shù)視頻的三維重建研究。她在開普敦大學(xué)完成了精算學(xué)和統(tǒng)計學(xué)學(xué)士學(xué)位。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 智能手機(jī)
    +關(guān)注

    關(guān)注

    66

    文章

    18624

    瀏覽量

    183868
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    13

    文章

    9796

    瀏覽量

    88013
  • 機(jī)器學(xué)習(xí)

    關(guān)注

    66

    文章

    8503

    瀏覽量

    134646
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    ArkUI-X平臺Bridge說明

    簡介 平臺用于客戶端(ArkUI)和平臺(Android或iOS)之間傳遞消息,即用于ArkUI與平臺雙向數(shù)據(jù)傳遞、ArkUI側(cè)調(diào)用平臺的方法、平臺調(diào)用ArkUI側(cè)的方法。 以Android平臺
    發(fā)表于 06-19 23:12

    與路由的區(qū)別 網(wǎng)絡(luò)技術(shù)的應(yīng)用

    一、與路由的區(qū)別 與路由是計算機(jī)網(wǎng)絡(luò)兩種重要的技術(shù),它們在網(wǎng)絡(luò)連接和數(shù)據(jù)傳輸方面發(fā)揮著
    的頭像 發(fā)表于 01-31 10:40 ?1423次閱讀

    安裝注意事項

    安裝注意事項 1. 了解的基本概念 在進(jìn)行安裝之前,了解
    的頭像 發(fā)表于 01-10 11:15 ?675次閱讀

    的方法及其優(yōu)缺點(diǎn)

    設(shè)備(橋接器)會自動學(xué)習(xí)網(wǎng)絡(luò)上的MAC地址,并根據(jù)這些地址轉(zhuǎn)發(fā)數(shù)據(jù)包。 源路由(Source Routing Bridging) 源路
    的頭像 發(fā)表于 01-10 11:12 ?1619次閱讀

    如何實(shí)現(xiàn)不同網(wǎng)絡(luò)的

    在現(xiàn)代網(wǎng)絡(luò)環(huán)境,不同網(wǎng)絡(luò)之間的通信是必不可少的。技術(shù)允許不同網(wǎng)絡(luò)段或子網(wǎng)之間的設(shè)備進(jìn)行通信,就像它們在同一個網(wǎng)絡(luò)中一樣。 1.
    的頭像 發(fā)表于 01-10 11:11 ?957次閱讀

    與VPN的比較分析

    是一種網(wǎng)絡(luò)設(shè)備,它在兩個或多個網(wǎng)絡(luò)段之間轉(zhuǎn)發(fā)數(shù)據(jù)幀,使得這些網(wǎng)絡(luò)段在邏輯上成為一個更大的網(wǎng)絡(luò)。橋接器工作在OSI模型的第二層,即數(shù)據(jù)鏈路層。 工作原理: 橋接器通過
    的頭像 發(fā)表于 01-10 11:08 ?873次閱讀

    解決網(wǎng)絡(luò)覆蓋問題

    互聯(lián)技術(shù),它允許不同網(wǎng)絡(luò)之間進(jìn)行數(shù)據(jù)傳輸。橋接器(Bridge)是一種連接不同網(wǎng)絡(luò)的設(shè)備,它能夠根據(jù)數(shù)據(jù)包的MAC地址進(jìn)行轉(zhuǎn)發(fā),實(shí)現(xiàn)網(wǎng)絡(luò)之間的通信。技術(shù)的主要優(yōu)勢在于能夠減少網(wǎng)絡(luò)擁
    的頭像 發(fā)表于 01-10 11:07 ?695次閱讀

    故障排除技巧

    故障排除之前,了解的基本原理是非常重要的。設(shè)備(如交換機(jī))在網(wǎng)絡(luò)層(OSI模型的第二層)工作,它能夠根據(jù)MAC地址學(xué)習(xí)網(wǎng)絡(luò)
    的頭像 發(fā)表于 01-10 11:05 ?1194次閱讀

    接在物聯(lián)網(wǎng)的角色

    在當(dāng)今數(shù)字化時代,物聯(lián)網(wǎng)(IoT)已經(jīng)成為連接物理世界與數(shù)字世界的橋梁。物聯(lián)網(wǎng)的核心在于其能夠?qū)⒏鞣N設(shè)備和系統(tǒng)連接起來,實(shí)現(xiàn)數(shù)據(jù)的收集、處理和分析,以提供有價值的洞察和自動化控制。 1. 技術(shù)
    的頭像 發(fā)表于 01-10 11:02 ?609次閱讀

    響應(yīng)式設(shè)計原則

    在當(dāng)今這個高度互聯(lián)的世界,不同系統(tǒng)和設(shè)備之間的通信變得越來越重要。響應(yīng)式設(shè)計原則是一種確保不同網(wǎng)絡(luò)協(xié)議和數(shù)據(jù)格式能夠無縫交互的方法。 1. 互操作性 互操作性是響應(yīng)式
    的頭像 發(fā)表于 01-10 11:01 ?492次閱讀

    技術(shù)在家庭網(wǎng)絡(luò)的使用

    在現(xiàn)代家庭,網(wǎng)絡(luò)連接已成為日常生活不可或缺的一部分。隨著智能家居設(shè)備的普及,家庭網(wǎng)絡(luò)的穩(wěn)定性和擴(kuò)展性變得越來越重要。技術(shù)作為一種連接不同網(wǎng)絡(luò)段的有效手段,被廣泛應(yīng)用于家庭網(wǎng)絡(luò)
    的頭像 發(fā)表于 01-10 10:59 ?745次閱讀

    無線設(shè)置教程

    在現(xiàn)代家庭和辦公環(huán)境,無線網(wǎng)絡(luò)已成為連接設(shè)備和訪問互聯(lián)網(wǎng)的基本需求。然而,由于墻壁、家具和其他障礙物的影響,單一無線路由器的信號覆蓋范圍可能有限。為了解決這個問題,無線技術(shù)應(yīng)運(yùn)而生。本文將詳細(xì)
    的頭像 發(fā)表于 01-10 10:57 ?2331次閱讀

    路由器怎樣無線另一個路由器

    的基本概念 無線是一種將兩個網(wǎng)絡(luò)連接在一起的技術(shù),它允許數(shù)據(jù)在這兩個網(wǎng)絡(luò)之間傳輸。在家庭網(wǎng)絡(luò)環(huán)境,無線
    的頭像 發(fā)表于 10-18 09:21 ?3296次閱讀

    無線wifi設(shè)置方法詳細(xì)步驟

    無線Wi-Fi是一種將兩個或多個網(wǎng)絡(luò)連接在一起的技術(shù),通常用于擴(kuò)展無線網(wǎng)絡(luò)的覆蓋范圍。 1. 準(zhǔn)備工作 兩臺無線路由器 :一臺為主路由器(連接到互聯(lián)網(wǎng)),另一臺為路由器(用于擴(kuò)
    的頭像 發(fā)表于 10-18 09:17 ?8929次閱讀

    如何第二個無線路由器

    無線路由器來擴(kuò)展無線網(wǎng)絡(luò)。 一、了解的概念 在開始第二個無線路由器之前,我們需要了解
    的頭像 發(fā)表于 10-18 09:16 ?2279次閱讀