HarmonyOS开发者限时福利来啦!最高10w+现金激励等你拿~ 了解详情
写点什么

阿里妈妈开源曲率空间学习框架、联邦学习解决方案,大幅提升数据的保护和使用效率

  • 2021-09-15
  • 本文字数:2117 字

    阅读完需:约 7 分钟

阿里妈妈开源曲率空间学习框架、联邦学习解决方案,大幅提升数据的保护和使用效率

9 月 15 日,阿里妈妈宣布同时开源两项 AI 技术:曲率空间学习框架和联邦学习解决方案。


这两项最新技术成果的开源,将助力业界提高数据隐私保护能力,预计可降低 80%的存储消耗量和提升 15%的用户请求匹配精准度,上述技术也可应用于互联网行业之外的各个科研计算领域。

 

据了解,曲率空间学习框架(Curvature Learning Framework,简称 CLF)是中国首个经过工业级场景验证的曲率空间深度学习框架;联邦学习解决方案(Elastic Federated Learning Solution,简称 EFLS),是百亿级工业场景跨企业合作的联邦学习解决方案。

 

用户即日起可在全球最大开源网站 GitHub 搜索“Curvature-Learning-Framework”,9 月 30 日以后搜索“Elastic-Federated-Learning-Solution”,查看两个项目的开源文件。

 

“AI 技术是新一代生产力。在基于庞大的工业级场景应用成熟后,我们选择向社会开放这些技术能力,以最大化共享 AI 技术红利,共同进步。”阿里妈妈 CTO 郑波表示。



曲率空间学习框架开源:AI 换轨,坐上曲率飞船

 

曲率是一个衡量空间弯曲程度的量,曲率越接近零,空间越平坦。在科幻小说《三体》中,人类正是利用空间曲率的变化建造出曲率飞船。

 

AI 所需的海量数据与计算往往基于曲率为零的欧氏空间,这潜在制约了表达能力。阿里妈妈技术团队发现,曲率空间能更精准的建模图数据结构,此次开源的曲率空间学习框架,包含流形、算子、模型及黎曼优化器整套深度学习流程,用户可便捷的将模型迁移到曲率空间中,从而给 AI 的发展打开一条新通路。

 

想象一下,使用曲率空间建模就像“吹起一个气球”。假设一个干瘪的气球表面上有十亿个节点,这会是非常致密的状态。随着气球逐渐充气变大,气球表面越来越“弯曲”,节点之间就分的越开,构成的形状也越立体,我们就能越好的观察这些节点并进行区分。

 

曲率空间正如一个膨胀的气球表面,相对于同样大小的欧氏空间,它能容纳的数据更多,而且对树、环等几何特性展现的更全面精准。基于图数据 Cora 的实验证明,替换欧氏空间为曲率空间,模型能提升约 8%的预测精度。

 

阿里妈妈技术人士表示,该技术已经在阿里妈妈业务中展现出很高的应用潜力。基于淘宝搜索广告场景,曲率空间能精准建模十亿级商家与用户的交互行为,利用空间曲率变化实现数据的“定向放大”与“精准分割”。系统全量上线后,存储消耗量降低 80%,用户侧请求匹配精准度相对提升 15%。

 

该技术有望广泛应用到其他行业,引领新一轮的 AI 落地浪潮。业内专家表示,曲率空间可以建模地球表面的云层运动轨迹,航空航海路线等,也能表征物流运输图、资源流动图等。从更及时的天气预报、更精准的地图导航,到更高效的物流运输、更公平的社会资源分配,此项新技术能切实改善人们的生活。

 

联邦学习解决方案开源:兼收并蓄,开放共建

 

联邦学习是 2016 年由谷歌提出,在保护终端隐私的前提下进行机器学习,帮助广告主实现跨公司多端投放的解决方案。通俗一点讲,联邦学习就像几位老师傅共同训练一个徒弟,老师傅们各有所长,却互相防备不能共享,而徒弟则兼收并蓄,融会贯通,集合各家所长,终学有所成。

 

据了解,阿里妈妈此次开源的联邦学习解决方案,更加关注隐私保护和加密计算,并在此基础上建立 APP 孤岛的信息链接,构建机器学习模型,在高并发、加密性、易用性和产品化等方面提供更好支持,方便多方在超大规模稀疏场景下进行联邦学习的合作与实践。

 

具体而言,联邦学习解决方案具备以下特点:


  • 大规模高可用:


云原生实现方案支持百亿规模数据求交;多种验证方式保证最终结果的完整性和正确性;精简的训练交互协议与高效的底层实现,保证分布式训练的高吞吐;精细的状态恢复与模型校验,确保分布式容灾的正确性。 


  • 加密保护隐私:


通过数据安全与计算安全两种手段以保障用户隐私,支持多种隐私保护方案以提供安全和性能的最佳平衡。


  • 更强大更便捷:


首次开源了基于水平聚合、层次聚合的两种模型,并通过可视化 web 界面方便任务流程的开发、配对、调度和管理,极大地提升迭代效率。

 

依托于联邦学习解决方案,阿里妈妈 Unidesk 产品已助力珀莱雅、卡姿兰、薇诺娜、花西子、修正等多个企业实现品牌和业务双丰收。据了解,花西子采用 Unidesk 产品以后,经营效果提升明显,短短 2 个月时间,品牌 ROI 提升 15%,且放量也在逐步提高。

 

未来,该技术可以扩展到金融、医疗共建等场景,普适性较高。

 

将开源进行到底

 

此次开源,延续了阿里妈妈“将开源进行到底”的一贯做法。从 2015 年开始,阿里妈妈技术团队将大规模深度学习、图学习、强化学习等多项 AI 技术深度应用到业务,引领了 AI 在互联网广告领域的探索和大规模应用,并沉淀出多个业内领先的 AI 工程系统。

 


2018 年 11 月,阿里妈妈对外开源了业界首个面向高维稀疏场景的大规模工业级训练引擎 XDL,并同时开源包含深度兴趣网络(DIN)、深度兴趣进化网络(DIEN)、深度树匹配(TDM)在内的多个工业级创新算法。在 GitHub 上,XDL 项目开源一个月内所获星赞数超过 1000 个,到现在已有 4000 多星赞,近 1000 次复制使用。

 

2019 年 1 月,阿里妈妈的大规模图深度学习框架 Euler 正式对外开源,在工业界引起巨大反响的同时,也引起学术界关注。2021 年 4 月,Euler2.0 发布,通用性和灵活性得到进一步提升。在 GitHub 网站上,Euler 项目现在已经有超过 2500 个星赞和 500 次复制使用。

 

2021-09-15 16:412986
用户头像
刘燕 InfoQ高级技术编辑

发布了 1112 篇内容, 共 532.6 次阅读, 收获喜欢 1976 次。

关注

评论

发布
暂无评论
发现更多内容

MySQL 存储函数及调用

EquatorCoco

MySQL 数据库

百度面试:如何用Redis实现限流?

王磊

Java 面试

英特尔软硬协同,优化阿里云通义千问2 AI模型

E科讯

嘉为蓝鲸监控中心:助力大型运营商解决烟囱工具式监控难题

嘉为蓝鲸

监控 运维工具 IT 运维

【AI法官】人工智能判官在线判案?

AppBuilder

为什么说SD-WAN能省钱?

Ogcloud

SD-WAN 企业组网 SD-WAN组网 SD-WAN服务商 SDWAN

淘宝商品列表数据接口实战:构建实时比价系统

tbapi

淘宝商品列表数据接口 淘宝商品数据采集 关键词搜索淘宝接口

多平台小程序管理的实用工具!

Geek_2305a8

淘宝商品详情API接口:高效处理商品信息,提升工作效率

技术冰糖葫芦

API Explorer API 接口 API 策略 pinduoduo API

面试官:你讲下接口防重放如何处理?

不在线第一只蜗牛

程序员 面试 接口

JavaScript 及相关技术的集成开发环境(IDE)WebStorm 2024 for Mac

Mac相关知识分享

JavaScript webstorm 开发工具 Mac软件

JetBrains PhpStorm 2024 for Mac(PHP集成开发) v2024.1.3中文版

Mac相关知识分享

开发工具 Mac软件 PHP开发

鹏华基金研运一体化平台落地实践,探索数字化转型

嘉为蓝鲸

数字化转型 一体化 一体化平台

2024IT市场权威榜单发布!腾讯云TBDS斩获两大奖项!

腾讯云大数据

TBDS

低代码和大模型:企业如何训练自己的内容审核平台?

爱AI的猫猫头

网络安全 低代码 开发 内容审核 大模型

借助Historian Connector + TDengine,打造工业创新底座

TDengine

数据库 时序数据库

开发电竞体育直播平台:可呈现电竞数据和具备的功能

软件开发-梦幻运营部

XML HttpRequest 入门指南

Liam

JavaScript xml 前端 Web axaj

开源无代码 / 低代码平台 NocoBase 1.0.1-alpha.1: 区块支持高度设置

NocoBase

开源 低代码 无代码开发 低代码开发 无代码

人工智能ChatGPT的多种应用:提示词工程

测吧(北京)科技有限公司

测试

第十二届双态IT用户大会·嘉为蓝鲸平台工程专题研讨会圆满落幕!

嘉为蓝鲸

DevOps BizDevOps 一体化运维

软件测试学习笔记丨Vue路由-嵌套路由

测试人

软件测试

嘉为蓝鲸告警中心:助力大型保险集团实现告警规范管理

嘉为蓝鲸

告警体系 运维工具 IT 运维

推荐十个优秀的ASP.NET Core第三方中间件,你用过几个?

不在线第一只蜗牛

asp.net 后端 中间件

StarRocks vs. Trino: 高并发性能背后的技术优势是什么?

StarRocks

数据库 大数据

阿里巴巴1688商品详情API返回值应用探索:电商数据驱动的市场趋势预测

技术冰糖葫芦

API Explorer API 接口 API 策略

软件测试学习笔记丨Vue路由-路由重定向

测试人

软件测试

软件测试学习笔记丨Vue路由-编程式导航

测试人

限流器设计思路(浅入门)

快乐非自愿限量之名

Java Python 前端 限流器

阿里妈妈开源曲率空间学习框架、联邦学习解决方案,大幅提升数据的保护和使用效率_AI&大模型_阿里妈妈技术团队_InfoQ精选文章