聯邦學習將帶來全新的資料合作生態系統
聯邦學習將帶來全新的資料合作生態系統
聯邦學習(Federated Learning)在 2016 年由谷歌最先提出,是一種新興的人工智慧基礎技術。
在谷歌 2019 年第二季度的財報會議中,谷歌 CEO 桑達爾·皮查伊強調,對谷歌來說,聯邦學習和一些其他的隱私管控是其現階段重點的關注和努力方向。他說:“我們一直以來都很關注使用者的隱私及管理,三年來我們一直在提議並推進聯邦學習的使用,這也是我們現階段的重點之一。”
最初聯邦學習被用在預測安卓系統使用者在使用鍵盤時下一步會輸入的內容,也被用在谷歌的文字預測軟體以及火狐瀏覽器 URL 搜尋方面。其設計目標是在保障大資料交換時的資訊保安、保護終端資料和個人資料隱私、保證在合法合規的前提下,在多參與方或多計算結點之間開展高效率的機器學習。
如下圖所示,聯邦學習可以讓裝配有 Gboard (谷歌推出的虛擬鍵盤)的軟體在不向谷歌傳送原始使用者個人資料的前提下提升其 AI 模型。這樣以來,使用者手機中的資料還儲存在使用者手機中,而並未被髮送或儲存到某個中央雲伺服器中。
(來源:谷歌)
雲伺服器將某個人工智慧演算法的最新版本傳送到某一使用者群的裝置上,然後使用者的手機可以根據本地資料更新 AI 模型。這時,傳送回雲伺服器的只是更新部分,而非更新所使用的本地資料。雲伺服器可以再根據接收到的更新部分,提升演算法的全域性狀態(“global state”)。
聯邦學習既可以保護使用者資料,又不會影響 AI 演算法的效能提升,其正在為包括醫療健康和銀行業在內的、對於資料使用受到高度管控和關注的行業提供新的可能。
英偉達 AI 驅動的軟硬體框架 Clara 主要針對醫療健康場景,現也支援聯邦學習。其使用方包括美國放射醫學院、麻省總醫院、佈列根和婦女醫院臨床資料科學中心、UCLA 醫學中心等。此外,英偉達還與醫療健康領域初創公司 Owkin 合作,Owkin 主要從事使用聯邦學習進行癌症患者的抗藥性預測方面的業務。
(來源:英偉達)
中科院計算所泛在計算系統研究中心針對帕金森症建立了 FedHealth 框架,使用聯邦學習、遷移學習、增量學習來判斷病人服藥前後的狀況變化、用藥效果等。
金融領域,中國的微眾銀行正與騰訊雲和加拿大人工智慧研究中心 Mila 合作進行聯邦學習方面的研究。今年 1 月底,微眾銀行 AI 團隊研發並推出了其聯邦學習開源框架 FATE(Federated AI Technology Enabler),該框架採用了多種安全計算協議,從而保證在符合監管規定的資料保護前提下,進行跨域資訊合作。
當然,聯邦學習作為一個新興概念正在越來越廣泛地應用在其他領域,比如智慧城市、智慧製造等方面。中國公司(包括京東、華為等)也在積極佈局聯邦學習方面的應用,相信在未來可以看到更多聯邦學習相關的落地應用。
關鍵詞
全域性模型+本地資料
透過使用聯邦學習,使用者可以透過使用本地資料訓練 AI 模型,並只將 AI 模型的更新部分更新到中央雲端。雲端透過所有網路中使用者傳送的模型更新來最佳化其模型應用。
資料多樣化
聯邦學習可以助力跨域合作,從而透過更加多樣化的本地資料最佳化全域性模型。
https://blog.csdn.net/weixin_42137700/article/details/104279062
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69946223/viewspace-2675299/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 騰訊“神盾-聯邦計算”平臺帶你翻越資料合作的重重大山
- 多模態學習,帶來AI全新應用場景?AI
- 聯邦學習新時代即將到來?標準化聯邦互動協議FLEX開源!聯邦學習協議Flex
- 聯邦學習:多工思想與聚類聯邦學習聯邦學習聚類
- 萬物互聯:物聯網帶來的生態協同
- 聯邦學習中的差分隱私與同態加密聯邦學習加密
- 跨越式升級,敏感資料動態脫敏系統全新而來!
- 強化學習、聯邦學習、圖神經網路,飛槳全新工具元件詳解強化學習聯邦學習神經網路元件
- 構建資料安全合作生態,守護資料安全
- 《聯邦學習》——個人筆記(二)聯邦學習筆記
- 星環科技 TDS 聯邦計算能力,讓企業異構資料來源資料合作暢通無阻
- 打造雲遊戲跨端生態,騰訊先遊攜手北京聯通釋出全新重磅合作遊戲跨端
- 多工學習分散式化及聯邦學習分散式聯邦學習
- 一步一步學習大資料:Hadoop 生態系統與場景大資料Hadoop
- 帶著問題學習分散式系統之資料分片分散式
- GitChat · 大資料 | 一步一步學習大資料:Hadoop 生態系統與場景Git大資料Hadoop
- 聯邦學習綜述性論文聯邦學習
- 聯邦學習中的優化演算法聯邦學習優化演算法
- RPA學習天地與達觀資料達成戰略合作,共建RPA行業生態行業
- 啟明星辰佈局資料安全擬打造全新安全生態體系
- 態勢感知、聯防聯動,資料安全綜合治理平臺為資料安全帶來新視角
- [譯] 構建未來的設計生態系統
- 聯邦學習開源框架FATE架構聯邦學習框架架構
- 聯邦學習城市應用實戰指南聯邦學習
- 為推進科學研究,谷歌呼籲建立標準的資料生態系統谷歌
- 關於資料庫系統的學習資料庫
- 資料不出本地,還能享受大資料訓練模型,聯邦學習提供一種應用廣闊的學習新正規化大資料模型聯邦學習
- 大資料的系統學習:大資料學習的三個階段概述大資料
- 大資料帶來信貸“四則運算”:金融生態需要“加減乘除”大資料
- 學習管理系統能為企業混合式學習帶來的種種好處
- ChatGPT全宇宙!開啟聯網解除封印,外掛生態系統即將問世!ChatGPT
- 邦芒面試:11條面試提示將給你帶來成功的契機面試
- 分散式機器學習、聯邦學習、多智慧體的區別和聯絡分散式機器學習聯邦學習智慧體
- 聯邦學習 2020-3-15聯邦學習
- 資料庫市場格局已變,統一的管理平臺將成為資料庫生態體系的主要入口資料庫
- 大規模機器學習:將資料科學引入生產系統架構的典型模式機器學習資料科學架構模式
- 使用KPI儀表板,建立完整的資訊資料生態系統KPI
- Double Kill!! 資料聯邦修煉之路