聯合解決方案系列|VMware和星雲Clustar聯合釋出多雲聯邦學習解決方案

語言: CN / TW / HK

引言

4月20日,VMware China Innovation Advanced Solutions Forum線上論壇順利召開,VMware中國研發技術總監張海寧與星雲Clustar CTO 張駿雪聯合發表《Federated Machine Learning Enterprise Solution with Clustar on VCF/Tanzu》主題演講。在資料融合互動與資料隱私安全愈演愈烈的當下,聯邦學習技術為基於跨領域的企業級資料合作提供了新的正規化。VMware與星雲Clustar提出以VCF(VMware Cloud Foundation)為基礎設施平臺,FATE聯邦學習框架結合星雲Clustar自研網路加速技術的聯邦學習解決方案,以打破資料孤島,讓客戶可以使用聯合建模技術,更好挖掘資料價值。


首個工業級聯邦學習開源平臺: FATE

FATE (Federated AI Technology Enabler) 是全球首個聯邦學習工業級開源框架,可以讓企業和機構在保護資料安全和資料隱私的前提下進行資料協作。 FATE專案使用多方安全計算 (MPC) 以及同態加密 (HE) 技術構建底層安全計算協議,以此支援不同種類的機器學習的安全計算,包括邏輯迴歸、基於樹的演算法、深度學習和遷移學習等。 FATE由微眾創立,於2019年2月首次對外開源,併成立 FATE TSC(技術指導委員會) 對FATE社群進行開源治理,成員包含國內主要雲端計算和金融服務企業。

VMware與星雲Clustar均為FATE TSC(技術指導委員會)成員,以及FATE開源專案重要貢獻者。在開源社群中主要負責底層技術的研發,並與微眾銀行、銀聯、建信金科、工行等技術能力領先的金融科技企業共同推進聯邦學習在金融領域的探索實踐。


VMware產品介紹

VMware Cloud Foundation

VMware 提供業界領先的混合雲和多雲服務並具有廣泛的雲合作伙伴體系,雲合作伙伴包含 AWS、Azure、GCP、阿里雲等大型公有云服務提供商,也包括中小型面向行業客戶的 VMware VCPP 雲服務提供商,能夠提供以VCF (VMware Cloud Foundation)統一技術棧為基礎的跨雲和混合雲服務,降低了企業上雲的複雜度。

VMware 的VCF Tanzu,可幫助企業完成應用的現代化改造,包括開發、運維一個全新的基於 Kubernetes 的雲原生應用,以及一系列全新的產品和服務來支援新的業務。

KubeFATE

KubeFATE由VMware開源,並與微眾銀行及FATE開源社群一起聯合開發的雲原生聯邦學習專案,致力於通過使用雲原生相關技術,降低聯邦學習使用門檻及運維成本。

KubeFATE為FATE提供在Kubernetes的部署管理方案,以及面向生產運維管理的使用功能,包括線上升級、遷移、日誌聚合、監控等。

KubeFATE與VMware Cloud Foundation的整合,為FATE提供業界領先的跨雲和多雲聯邦學習方案。


星雲Clustar聯邦學習加速方案

星雲Clustar是以算力為核心的隱私計算技術提供商,專注於高效能隱私計算算力產品研發與技術創新。公司產品包括隱私計算的軟體計算平臺,軟硬一體機、算力加速卡以及晶片等。致力於以“算力+”技術佈局與戰略理念,為隱私計算應用規模化落地打造算力“基建”,高效賦能資料有序共享與綜合應用。

為充分應對聯邦學習等隱私計算場景,解決聯邦學習因使用同態加密而產生的計算壓力與延時問題,星雲Clustar推出了業界首款隱私計算加速卡,使聯邦學習效能在一些場景下實現數十倍提升。

該加速卡採用星雲Clustar自研實現架構,具備高效能、低時延、易部署、易擴充套件等特性,支援16個任務平行計算,330個模冪計算引擎以及最高4096bit位寬的全量運算元密態運算,能讓資料在加密狀態下進行AI模型訓練與推理,滿足企業在資料安全、資料交換、資料共享建模及合規等需求,並提供便於二次開發的應用層介面與靈活部署擴充套件,便於客戶根據實際業務場景在雲或本地切換部署方案與擴充套件。


雙方聯合解決方案

為進一步打破資料孤島,幫助客戶高效挖掘資料價值,VMware與星雲Clustar提出以VCF(VMware Cloud Foundation)為基礎設施平臺,FATE聯邦學習框架結合星雲Clustar自研網路加速技術的聯邦學習解決方案。作為一款綜合星雲Clustar與VMware技術優勢的企業級聯邦學習解決方案,該方案具有更高安全、更高效能及更具開放相容性的核心能力,可覆蓋星雲隱私計算平臺、安全資料網路等企業級軟體產品,滿足多樣化的使用者需求,使客戶可以更專注實際應用場景。

此外,該方案依託於VCF提供的統一的跨多雲環境執行和管理平臺,具備“一站式”交付能力,尤其專注金融領域解決資料安全與保障資料合規流通問題,可部署在聯邦學習中各參與方,統一進行聯邦學習任務的全生命週期管理,幫助企業使用者實現聯邦資料建模以及資料管理等一系列功能,以安全、合規、高效的方式服務於金融行業的反欺詐、反洗錢、信貸風控、展業促活等創新應用,釋放金融資料價值。

來源|公眾號:VMware中國研發中心

「其他文章」