人工智能奔涌又一年,技术方向未见收敛,产品的变量和市场竞争的激荡随之而起。滚滚浪潮中,该如何抓住前行的准绳?
11 月 22 日,在 2024 年 IDEA 大会上,IDEA 研究院创院理事长、美国国家工程院外籍院士沈向洋指出,在技术大爆发时期开展创新,对技术的深度理解尤为重要。
沈向洋表示,从长远的人类社会发展角度来看,巨大跃迁都是由技术创新带来的。工业时代的全球 GDP 年均增速约为 1%-2%,信息时代在 3%-4%,人工智能时代,这个数字会是多少?与此同时,他强调,随着 AI 的各项能力逼近、甚至超越人类,AI 治理已成亟待全球共同面对的议题。
站在商业的视角,新技术快速冲入市场,则意味着技术需要理解需求。技术要在持续不断的反馈和创新中,与市场完成匹配(Technology-market fit,TMF)。IDEA 研究院的实践,正是这样一个缩影。本次大会上,IDEA 公布了一系列前沿研究与产业落地成果。
从通用视觉感知到具身智能
计算机视觉技术在真实世界的应用场景十分广泛。然而,过去主流的小模型方案,难以应对碎片化、多变的长尾需求,限制了技术落地规模。
源自自然语言研究的 Transformer 架构诞生后,视觉模型与之结合,走上一条“从小变大,从 N 变 1”之路。自 2022 年起,IDEA 团队从目标检测出发,打造精准度、通用性、泛化能力兼优的 DINO 系列视觉大模型。
本次大会发布了该系列最新的 DINO-X 通用视觉大模型,拥有真正的物体级别理解能力,实现开放世界(Open-world)目标检测。无需用户提示,直接检测万物。
与此同时,IDEA 团队还推出行业平台架构,通过一个大模型基座,结合通用识别技术结合,让模型不需重新训练,就可边用边学,支撑多种多样的 B 端应用需求。
视觉感知是机器与物理世界交互的基础。全场景视觉感知能力的提升,自然为技术落地拓宽了空间。
在具身智能领域,IDEA 研究院此次便一连宣布三个合作:与腾讯合作,在深圳福田区、河套深港科技创新合作区落地建设福田实验室,聚焦人居环境具身智能技术;与美团合作,探索无人机视觉智能技术;与比亚迪合作,拓展工业化机器人智能应用。
会上,IDEA 团队还分享了正在进行的 AI 助盲应用研究。
从合成数据到大模型价值创造
大模型能力的涌现,离不开互联网时代的海量数据养料积累。如今,数据存量告急,引发业界对合成数据的重视。
在这个方向上,IDEA 团队自研了语境图谱技术,解决过往文本数据合成方案的多样性匮乏等问题。该技术为合成数据引入“指导手册”,以图谱为纲,指导用于合成的语境采样。
实验结果显示,IDEA 团队的方案能持续为大模型带来能力提升,表现超过目前的最佳实践(SOTA);从 token 消耗来看,平均节约成本 85.7%。目前,该技术内测平台已开放,通过 API 提供服务。
在拓展新前沿的同时,大模型价值创造也在进行时。大会上,IDEA 秀出多个垂类行业应用落地进展,包括:学术大模型和 AI 科研神器 ReadPaper、营销创作大模型,以及面向经济与金融领域的经济大模型、运筹决策大模型、投资大模型。
从 AI for Science 到 AI for Coding
在基础研究愈发受到重视的当下,AI for Science 是技术创新创业的重要方向。今年的诺贝尔奖,更是将这场科学革命推向聚光灯下。
IDEA 团队从化学领域的预测能力和数据能力入手,进行了研究和产业化实践。
在预测方面,IDEA 研发的多个化学领域专家大模型,分子属性预测和化学反应预测能力均处业界领先水平;在数据方面,IDEA 开发了化学文献多模态大模型,联合晶泰科技发布专利数据挖掘平台 PatSight,将药物领域的专利化合物数据挖掘时间,从数周缩短至 1 小时。
除了科学研究之外,另一个技术范式正在被 AI 重塑的领域,是编程语言。
此次大会上,IDEA 研究院的 MoonBit 团队展示了其开发平台强大的 AI for coding 体验。
MoonBit 是专为云计算与边缘计算设计的 AI 云原生编程语言及工具链,已具备完备的多后端支持和跨平台能力,可在硬件上直接运行,支持 RISC-V。MoonBit 的开源开发平台,将于 12 月正式开放。
低空经济:安全与开放
低空经济腾飞之势已起。IDEA 研究院连续第三年发布低空经济白皮书,今年的关键词是安全。沈向洋指出,在低空经济的发展中,安全是重中之重。唯有实现了安全,才能实现大规模飞行,而安全,又与效率、成本等要素紧密相联。针对此,《低空经济白皮书 3.0》推出了低空安全体系。
另一个关键词,则为开放。IDEA 推出低空管理与服务操作系统 OpenSILAS 1.0 Alpha 版,还携手 17 家产业伙伴发起 OpenSILAS 创新联合体,旨在打造开放共享、技术领先的系统和平台,建立有实际系统支撑的标准体系。
大湾区科创生态正开枝散叶
“深圳是一座用迭代软件的速度迭代硬件的城市。”沈向洋说道。
成长自“创都”深圳,过去一年,IDEA 的大湾区生态开枝散叶,种下更多创新的种子。除上述提及的福田实验室外,IDEA 与前海深港合作区共建 IDEA 前海创新院,与深圳龙岗区合作建设 IDEA 低空经济分院,与横琴粤澳深度合作区共建 IDEA-横琴数字技术及人工智能测评中心。
在初创生态方面,IDEA 的一众生态企业,如识渊科技、AI 玩伴机器人爱小伴、GPU 加速电影工业渲染器 Smaray 慧光追等,也在 IDEA 大会上悉数亮相。
评论