引 言
4 月 20 日,VMware China Innovation Advanced Solutions Forum 线上论坛顺利召开,VMware 中国研发技术总监张海宁与星云 Clustar CTO 张骏雪联合发表《Federated Machine Learning Enterprise Solution with Clustar on VCF/Tanzu》主题演讲。在数据融合交互与数据隐私安全愈演愈烈的当下,联邦学习技术为基于跨领域的企业级数据合作提供了新的范式。VMware 与星云 Clustar 提出以 VCF(VMware Cloud Foundation)为基础设施平台,FATE 联邦学习框架结合星云 Clustar 自研网络加速技术的联邦学习解决方案,以打破数据孤岛,让客户可以使用联合建模技术,更好挖掘数据价值。 首个工业级联邦学习开源平台: FATE FATE (Federated AI Technology Enabler)是全球首个联邦学习工业级开源框架,可以让企业和机构在保护数据安全和数据隐私的前提下进行数据协作。FATE 项目使用多方安全计算 (MPC)以及同态加密 (HE)技术构建底层安全计算协议,以此支持不同种类的机器学习的安全计算,包括逻辑回归、基于树的算法、深度学习和迁移学习等。FATE 由微众银行创立,于 2019 年 2 月首次对外开源,并成立 FATE TSC(技术指导委员会) 对 FATE 社区进行开源治理,成员包含国内主要云计算和金融服务企业。 VMware 与星云 Clustar 均为 FATE TSC(技术指导委员会)成员,以及 FATE 开源项目重要贡献者。在开源社区中主要负责底层技术的研发,并与微众银行、银联、建信金科、工行等技术能力领先的金融科技企业共同推进联邦学习在金融领域的探索实践。 VMware 产品介绍 VMware Cloud Foundation VMware 提供业界领先的混合云和多云服务并具有广泛的云合作伙伴体系,云合作伙伴包含 AWS、Azure、GCP、阿里云等大型公有云服务提供商,也包括中小型面向行业客户的 VMware VCPP 云服务提供商,能够提供以 VCF (VMware Cloud Foundation)统一技术栈为基础的跨云和混合云服务,降低了企业上云的复杂度。 VMware 的 VCF Tanzu,可帮助企业完成应用的现代化改造,包括开发、运维一个全新的基于 Kubernetes 的云原生应用,以及一系列全新的产品和服务来支持新的业务。 KubeFATE KubeFATE 由 VMware 开源,并与微众银行及 FATE 开源社区一起联合开发的云原生联邦学习项目,致力于通过使用云原生相关技术,降低联邦学习使用门槛及运维成本。 KubeFATE 为 FATE 提供在 Kubernetes 的部署管理方案,以及面向生产运维管理的使用功能,包括在线升级、迁移、日志聚合、监控等。 KubeFATE 与 VMware Cloud Foundation 的集成,为 FATE 提供业界领先的跨云和多云联邦学习方案。 星云 Clustar 联邦学习加速方案 星云 Clustar 是以算力为核心的隐私计算技术提供商,专注于高性能隐私计算算力产品研发与技术创新。公司产品包括隐私计算的软件计算平台,软硬一体机、算力加速卡以及芯片等。致力于以“算力+”技术布局与战略理念,为隐私计算应用规模化落地打造算力“基建”,高效赋能数据有序共享与综合应用。 为充分应对联邦学习等隐私计算场景,解决联邦学习因使用同态加密而产生的计算压力与延时问题,星云 Clustar 推出了业界首款隐私计算加速卡,使联邦学习性能在一些场景下实现数十倍提升。 该加速卡采用星云 Clustar 自研实现架构,具备高性能、低时延、易部署、易扩展等特性,支持 16 个任务并行计算,330 个模幂计算引擎以及最高 4096bit 位宽的全量算子密态运算,能让数据在加密状态下进行 AI 模型训练与推理,满足企业在数据安全、数据交换、数据共享建模及合规等需求,并提供便于二次开发的应用层接口与灵活部署扩展,便于客户根据实际业务场景在云或本地切换部署方案与扩展。 双方联合解决方案 为进一步打破数据孤岛,帮助客户高效挖掘数据价值,VMware 与星云 Clustar 提出以 VCF(VMware Cloud Foundation)为基础设施平台,FATE 联邦学习框架结合星云 Clustar 自研网络加速技术的联邦学习解决方案。作为一款综合星云 Clustar 与 VMware 技术优势的企业级联邦学习解决方案,该方案具有更高安全、更高性能及更具开放兼容性的核心能力,可覆盖星云隐私计算平台、安全数据网络等企业级软件产品,满足多样化的用户需求,使客户可以更专注实际应用场景。