写点什么

哈佛大学联合 MIT 研究人员发布了 Clevrer 数据集,以推进视觉推理和神经符号 AI 的发展

  • 2020-06-08
  • 本文字数:1705 字

    阅读完需:约 6 分钟

哈佛大学联合MIT研究人员发布了Clevrer数据集,以推进视觉推理和神经符号AI的发展

近日,哈佛大学和麻省理工学院沃森 AI 实验室的研究人员发布了 Clevrer 数据集,用于评估 AI 模型识别因果关系和进行推理的视频诊断数据集。麻省理工学院 IBM 沃森实验室负责人大卫·考克斯 (David Cox) 称, Clevrer 数据集可以在创造混合 AI 方面取得进展,混合 AI 是指结合了神经网络和符号 AI 的混合型 AI。IBM 研究团队负责人达里奥·吉尔 (Dario Gil) 亦将神经符号 AI 列为 2020 年最重要的进展之一。


Clevrer 是一个诊断视频数据集,用于系统评估各种推理任务上的计算模型。近期,在全数字化的国际表征学习会议 (ICLR) 上发表的一篇论文中,介绍了有关视频表征与推理 (Clevrer) 数据集碰撞事件的初步研究成果。


Clevrer 建立在 Clevr 基础之上。Clevr 是斯坦福大学 (Stanford University) 和 Facebook AI 研究团团队 (Facebook AI Research)于 2016 年发布的一组数据集,用来分析神经网络的视觉推理能力。该团队成员包括大名鼎鼎的 ImageNet 创始人李飞飞 (Fei Fei Li) 博士。在国际表征学习会议 (ICLR) 上,Clevrer 的共同创作者例如来自麻省理工学院-IBM 沃森实验室 (MIT-IBM Watson Lab) 的庄根和来自 Deepmind 的普希梅特·科利 (Pushmeet Kohli) 等人对神经符号概念 NS-DR (Neuro Symbolic Concept Learner,NS-DR),一种应用于 Clevr 的神经符号学模型做了介绍。


该论文写道:“我们对视频的时间和因果推理进行了系统性的研究。视频的时间和因果推理这个问题非常深刻且具有挑战性,它困扰研究人员很久了,但我们才刚刚开始用‘现代化的’ AI 工具来对它进行研究。”“我们新开发的 Clevrer 数据集和 NS-DR 模型即是朝这个研究方向进行的初步探索。”


Clevrer 数据集由 Bullet 物理模拟器制作,包括 2 万部展示桌面上物体碰撞的合成视频和一组自然语言数据集,其中包括与视频内物体相关的问题和答案。总共有超过 30 万个这样的问题和答案,它们被分为描述性、解释性、预测性和反事实性等类别。


麻省理工学院-IBM 沃森实验室负责人大卫·考克斯 (David Cox) 在一次采访中向 媒体透露,他坚信 Clevrer 数据集将有助于创造混合 AI,混合 AI 结合了神经网络和符号 AI。考克斯表示,IBM 研究团队 (IBM Research) 将把该方法应用于 IT 基础设施管理和工厂、建筑工地等工业环境。


考克斯称:“我认为这个数据集对几乎所有类型的应用都很重要。“通过该数据集,我们可以将世界简单化为许多到处移动的球,这也正是观察世界、了解世界、以及做计划并改变世界的第一步。因此,我们认为这个数据集的应用或将横跨多个领域,而视觉和机器人技术则是很好的开始。”


麻省理工学院-IBM 沃森 AI 实验室成立于三年前,旨在取得与广义 AI 主题相关的颠覆性进展。该实验室如 ObjectNet 等一些成果凸显了 ImageNet 之类的深度学习成功案例相对薄弱,所以该实验室已把重心转向了神经网络和符号或经典 AI 的结合上。


符号 AI 和神经网络一样,已经存在了几十年之久。考克斯认为,神经网络在等待着合适的条件出现,如足够多的数据和足够多的计算符号,与此同时 AI 也在等待着神经网络的发展,以便再度复苏。


考克斯说,这两种 AI 的互补性很好,如果能够结合,我们便可以用更少的数据和更高的效能来打造更稳健和更可靠的模型。在年初与 VentureBeat 的一次访谈中,IBM 研究团队负责人达里奥·吉尔 (Dario Gil) 称神经符号 AI 将成为 2020 年最重要的进展之一。


考克斯说,不论你想得到什么结果,通过神经符号 AI,你都可以表征知识或程序,而不是像神经网络那样映射输入和输出。因此,这或许能够使 AI 更好地帮助我们解决现实世界的问题。


考克斯称,“谷歌有一条数据之河,亚马逊也有,这些都不是坏事,但我们绝大多数的问题更像是智力游戏,所以我们认为,要向前发展,真正让 AI 不再是概念上的炒作,我们需要建立能够实现这一点的系统,这些系统有逻辑组件,可以能够灵活地重新配置自己,可以根据环境和实验采取行动,可以解释这些信息,并拥有其认知世界的内在心理模型”。


麻省理工学院-IBM 沃森 AI 联合实验室成立于 2017 年,总投资 2.4 亿美元。


原文链接:


https://venturebeat.com/2020/04/28/mit-researchers-release-clevrer-to-advance-visual-reasoning-and-neurosymbolic-ai/


2020-06-08 10:281708
用户头像
李冬梅 加V:busulishang4668

发布了 1151 篇内容, 共 770.5 次阅读, 收获喜欢 1282 次。

关注

评论

发布
暂无评论
发现更多内容

重塑AI算力底座!阿里云服务器操作系统V4正式发布

新消费日报

全球AI大模型综合排名(Top 20)

测吧(北京)科技有限公司

人工智能 软件测试 测试开发

【直播预约】天翼云如何通过 DolphinScheduler 实现大数据自动化与全链路血缘,探索实践亮点!

白鲸开源

大数据 技术分享 Apache DolphinScheduler 天翼云 血缘关系

昇腾算力赋能视频生成革命 浙江大学团队攻克长时一致性难题

极客天地

一文教会你基于 Rainbond 部署 DolphinScheduler 高可用集群

白鲸开源

大数据 开源 部署 Apache DolphinScheduler rainbond

圆满闭幕|WAIC2025规模创历史新高,“灵掘”具身智能模型全球首发引全网关注

网易伏羲

智慧矿山 工程机械智能化 工程机器人 挖掘机器人 装载机器人

社区新贡献:X2SeaTunnel 助你无缝迁移到 SeaTunnel!

白鲸开源

开源 数据同步 Apache SeaTunnel 数据迁移工具 X2SeaTunnel

智能化测试基础架构

测吧(北京)科技有限公司

人工智能 软件测试 测试开发 agent

超强组合!Dify+Milvus构建生产级RAG系统的终极指南

阿里云大数据AI技术

人工智能 云计算 大数据 Milvus dify

跟复旦硕士聊了1小时,没想到这些基础题他居然也栽了

王中阳Go

Go 后端 模拟面试

10分钟无痛部署!字节Coze开源版喂饭教程

测试人

AI 赋能的故障排除:技术趋势与实践

不在线第一只蜗牛

人工智能

暑期高效出行用鸿蒙5,华为钱包畅行无忧卡一碰就过闸、小艺问答智能规划行程

最新动态

e签宝CEO金宏洲受邀出席WAIC世界人工智能大会

科技汇

2025可信数据库发展大会召开,天翼云TeleDB领航核心系统创新实践!

天翼云开发者社区

数据库

Coze开源本地部署教程

测吧(北京)科技有限公司

人工智能 软件测试 测试开发 Coze开源

稳居第一,实至名归!

天翼云开发者社区

云服务

汽车线束行业AI智能化MES解决方案:推动智能制造与质量升级

万界星空科技

mes 汽车线束行业 汽车线束mes 制造业转型 智能化MES

全球首发!网易灵动推出“灵掘”具身智能模型,展示中国工程机械智能化硬核实力

网易伏羲

智慧矿山 网易伏羲 网易灵动 工程机械智能化 工程机器人

新手教程:用外部 PostgreSQL 和 Zookeeper 启动 Dolphinscheduler

白鲸开源

数据库 postgresql zookeeper 开源 Apache DolphinScheduler

Vidar Stealer:隐藏在Steam游戏中的信息窃取恶意软件分析

qife122

恶意软件 威胁分析

如何安装DashVector向量检索服务SDK

DashVector

数据库 大数据 AI 大模型

重复文件查找工具:DataSecurity Plus 全面提升企业文件管理效率

运维有小邓

重复文件查找工具

智能汽车,不只是造出来的,更是“拟”出来的

DevOps和数字孪生

智能汽车 数字样机

手把手玩转本地大模型:Ollama+DeepSeek+Dify 零门槛全流程指南

测试人

软件测试

多分支注意力机制提升表格数据建模效果

qife122

机器学习 表格数据

社交媒体上舆情监测的“微爆点”:如何识别和干预?

沃观Wovision

舆情监测 海外舆情监控 沃观Wovision 舆情监测系统

中烟创新自研【烟草专卖执法案卷评查系统】入选“北京市人工智能赋能行业发展典型案例”

中烟创新

每日经济新闻专访:押注具身智能模型、不做硬件做“大脑”,网易能否啃下比智驾更复杂的“硬骨头”?

网易伏羲

智慧矿山 网易灵动 工程机械智能化 挖掘机器人 装载机器人

慢查询日志在性能优化中的价值

电子尖叫食人鱼

性能优化

研发效能的下一站:AI是否会让你“无事可做”?

思码逸研发效能

研发效能 效能度量 效能管理 智能编程 思码逸

哈佛大学联合MIT研究人员发布了Clevrer数据集,以推进视觉推理和神经符号AI的发展_文化 & 方法_KHARI JOHNSON_InfoQ精选文章