10 月 23 - 25 日,QCon 上海站即将召开,现在大会已开始正式报名,可以享受 8 折优惠 了解详情
写点什么

哈佛大学联合 MIT 研究人员发布了 Clevrer 数据集,以推进视觉推理和神经符号 AI 的发展

  • 2020-06-08
  • 本文字数:1705 字

    阅读完需:约 6 分钟

哈佛大学联合MIT研究人员发布了Clevrer数据集,以推进视觉推理和神经符号AI的发展

近日,哈佛大学和麻省理工学院沃森 AI 实验室的研究人员发布了 Clevrer 数据集,用于评估 AI 模型识别因果关系和进行推理的视频诊断数据集。麻省理工学院 IBM 沃森实验室负责人大卫·考克斯 (David Cox) 称, Clevrer 数据集可以在创造混合 AI 方面取得进展,混合 AI 是指结合了神经网络和符号 AI 的混合型 AI。IBM 研究团队负责人达里奥·吉尔 (Dario Gil) 亦将神经符号 AI 列为 2020 年最重要的进展之一。


Clevrer 是一个诊断视频数据集,用于系统评估各种推理任务上的计算模型。近期,在全数字化的国际表征学习会议 (ICLR) 上发表的一篇论文中,介绍了有关视频表征与推理 (Clevrer) 数据集碰撞事件的初步研究成果。


Clevrer 建立在 Clevr 基础之上。Clevr 是斯坦福大学 (Stanford University) 和 Facebook AI 研究团团队 (Facebook AI Research)于 2016 年发布的一组数据集,用来分析神经网络的视觉推理能力。该团队成员包括大名鼎鼎的 ImageNet 创始人李飞飞 (Fei Fei Li) 博士。在国际表征学习会议 (ICLR) 上,Clevrer 的共同创作者例如来自麻省理工学院-IBM 沃森实验室 (MIT-IBM Watson Lab) 的庄根和来自 Deepmind 的普希梅特·科利 (Pushmeet Kohli) 等人对神经符号概念 NS-DR (Neuro Symbolic Concept Learner,NS-DR),一种应用于 Clevr 的神经符号学模型做了介绍。


该论文写道:“我们对视频的时间和因果推理进行了系统性的研究。视频的时间和因果推理这个问题非常深刻且具有挑战性,它困扰研究人员很久了,但我们才刚刚开始用‘现代化的’ AI 工具来对它进行研究。”“我们新开发的 Clevrer 数据集和 NS-DR 模型即是朝这个研究方向进行的初步探索。”


Clevrer 数据集由 Bullet 物理模拟器制作,包括 2 万部展示桌面上物体碰撞的合成视频和一组自然语言数据集,其中包括与视频内物体相关的问题和答案。总共有超过 30 万个这样的问题和答案,它们被分为描述性、解释性、预测性和反事实性等类别。


麻省理工学院-IBM 沃森实验室负责人大卫·考克斯 (David Cox) 在一次采访中向 媒体透露,他坚信 Clevrer 数据集将有助于创造混合 AI,混合 AI 结合了神经网络和符号 AI。考克斯表示,IBM 研究团队 (IBM Research) 将把该方法应用于 IT 基础设施管理和工厂、建筑工地等工业环境。


考克斯称:“我认为这个数据集对几乎所有类型的应用都很重要。“通过该数据集,我们可以将世界简单化为许多到处移动的球,这也正是观察世界、了解世界、以及做计划并改变世界的第一步。因此,我们认为这个数据集的应用或将横跨多个领域,而视觉和机器人技术则是很好的开始。”


麻省理工学院-IBM 沃森 AI 实验室成立于三年前,旨在取得与广义 AI 主题相关的颠覆性进展。该实验室如 ObjectNet 等一些成果凸显了 ImageNet 之类的深度学习成功案例相对薄弱,所以该实验室已把重心转向了神经网络和符号或经典 AI 的结合上。


符号 AI 和神经网络一样,已经存在了几十年之久。考克斯认为,神经网络在等待着合适的条件出现,如足够多的数据和足够多的计算符号,与此同时 AI 也在等待着神经网络的发展,以便再度复苏。


考克斯说,这两种 AI 的互补性很好,如果能够结合,我们便可以用更少的数据和更高的效能来打造更稳健和更可靠的模型。在年初与 VentureBeat 的一次访谈中,IBM 研究团队负责人达里奥·吉尔 (Dario Gil) 称神经符号 AI 将成为 2020 年最重要的进展之一。


考克斯说,不论你想得到什么结果,通过神经符号 AI,你都可以表征知识或程序,而不是像神经网络那样映射输入和输出。因此,这或许能够使 AI 更好地帮助我们解决现实世界的问题。


考克斯称,“谷歌有一条数据之河,亚马逊也有,这些都不是坏事,但我们绝大多数的问题更像是智力游戏,所以我们认为,要向前发展,真正让 AI 不再是概念上的炒作,我们需要建立能够实现这一点的系统,这些系统有逻辑组件,可以能够灵活地重新配置自己,可以根据环境和实验采取行动,可以解释这些信息,并拥有其认知世界的内在心理模型”。


麻省理工学院-IBM 沃森 AI 联合实验室成立于 2017 年,总投资 2.4 亿美元。


原文链接:


https://venturebeat.com/2020/04/28/mit-researchers-release-clevrer-to-advance-visual-reasoning-and-neurosymbolic-ai/


2020-06-08 10:281696
用户头像
李冬梅 加V:busulishang4668

发布了 1137 篇内容, 共 758.5 次阅读, 收获喜欢 1276 次。

关注

评论

发布
暂无评论
发现更多内容

为什么start方法不能重复调用?而run方法却可以?

王磊

Java 面试

DevOps进阶(三)走近 DevOps 工程师

No Silver Bullet

DevOps 敏捷 jenkins 2月月更

计算机网络面试知识点

yuexin_tech

面试 计算机网络

给面试加点硬菜:延迟任务场景,该如何提高吞吐量和时效性!

小傅哥

小傅哥 架构设计 Redis 6.0 任务系统

《MySQL入门很轻松》第4章:数据表中能存放的数据类型

乌龟哥哥

数据库 2月月更

平安保险基于 SPI 机制的 RocketMQ 定制化应用

阿里巴巴云原生

阿里云 云原生 消息队列 开源云工具

Linux系统编程-进程间通信(mmap内存映射)

DS小龙哥

2月月更 mmap内存映射

Kotlin语法手册(三)

寻找生命中的美好

android kotlin 安卓

虎啸春来!丰树电子与中联重科签署战略合作协议

联营汇聚

甜言蜜语生成器、定时问候邮件机…开源程序员为这个情人节付出太多

腾源会

开源

人人都是 Serverless 架构师 | 现代化 Web 应用开发实战

阿里巴巴云原生

阿里云 Serverless 云原生

剑指Offer——企业级项目中分层的含义与依据及多态的优势

No Silver Bullet

封装 offer 继承 多态 2月月更

DGIOT 工业物联网开源平台简介

dgiot

物联网 2月月更 2月日更 dgiot dgiot物联网

企业为什么要做应用多活?

阿里巴巴云原生

阿里云 云原生 容灾

Go 语言Web开发很简单:使用模板将视图与逻辑分离

宇宙之一粟

Go 语言 Web应用开发 2月月更

SSH远程连接命令执行没反应不报错问题解决(-bash: fork: retry: Resource temporarily unavailable.[资源暂时不可用])

山河已无恙

SSH Linxu 2月月更

如何快速构建服务发现的高可用能力

阿里巴巴云原生

阿里云 开源 微服务 云原生

Spring Boot Serverless 实战系列 | 性能调优

阿里巴巴云原生

阿里云 Serverless 架构 云原生

专访 OpenKruise 负责人:现在的云原生应用自动化发展到什么程度了?

阿里巴巴云原生

阿里云 开源 云原生

微信朋友圈高性能架构方案

Geek_36cc7c

详细讲解mybatis的执行流程

编程江湖

mybatis

独家下载!阿里云云原生携 10+ 技术专家带来《云原生与云未来的新可能》

阿里巴巴云原生

阿里云 Kubernetes 云原生 电子书

国内唯一!阿里云容器服务进入 Forrester 领导者象限

阿里巴巴云原生

阿里云 云原生 容器平台

流量录制与回放在vivo的落地实践

vivo互联网技术

测试工具 回归测试 流量回放

还没有表白神器?情人节来喽,快为心爱的她送上一份专属的礼物吧~

是Dream呀

Python 2月月更

教程直播第8期|一文详解 OceanBase 社区版生态工具 ODP & OCP

OceanBase 数据库

数据库 分布式 直播 OceanBase 开源

花灯照 人笑颜|OceanBase祝大家工作生活都和元宵一样甜

OceanBase 数据库

数据库 分布式 开发者 OceanBase 开源 元宵

阿里云容器服务差异化 SLO 混部技术实践

阿里巴巴云原生

阿里云 Kubernetes 云原生 混部技术

云原生落地大爆发,企业和开发者如何把握先机?

阿里巴巴云原生

阿里云 云原生 ACK ACK Anywhere

美团动态线程池实践思路,开源了

yanhom

Java 线程池 动态调整线程池参数 动态线程池 美团线程池

大数据培训:在 flink 中使用 hive udf的原因分析

@零度

flink 大数据开发

哈佛大学联合MIT研究人员发布了Clevrer数据集,以推进视觉推理和神经符号AI的发展_文化 & 方法_KHARI JOHNSON_InfoQ精选文章