AI实践哪家强?来 AICon, 解锁技术前沿,探寻产业新机! 了解详情
写点什么

Facebook 开源了应用于 VR 渲染的图像系统 DeepFocus

  • 2019-01-02
  • 本文字数:814 字

    阅读完需:约 3 分钟

Facebook开源了应用于VR渲染的图像系统DeepFocus

DeepFocus 是一个由 AI 驱动的新框架,用以在 VR 中渲染自然逼真的对焦效果。DeepFocus 可以与高级原型头戴式设备配合工作,实时显现不同焦距下的模糊效果。例如,当佩戴受 DeepFocus 支持的头戴式设备的人观看附近的物体时,它立即聚焦清晰地显示出来,而将背景物体虚化,就像在现实生活中的体验一样。这种散焦模糊(也称为视网膜模糊)对实现 VR 中的真实感和深度感知是非常重要的。DeepFocus 是首个能够为 VR 应用程序实时生成这种效果的系统。现在,Facebook 宣布开源工作和数据集,以帮助 VR 研究界的其他人员。

它的工作原理:

像使用累积缓冲器这样的传统方法能够实现物理上的精确散焦模糊。但是,它们无法为复杂丰富的内容生成实时效果,原因是这样的处理需求即使对最先进的芯片来说也很难做到。相反,Facebook 利用深度学习解决了这个问题。他们开发了一种新颖的端到端卷积神经网络,在眼睛看到某个场景的不同部分时,该网络会生成具有精确视网膜模糊的图像。该网络包括保持容量的新交织层,以在完全保留图像细节的同时减少输入的空间维度。然后,该网络的卷积层以相同的、降低的空间分辨率运行,并且运行时间明显减少。

它的重要意义:

随着对新的 VR 头戴式设备的研究进展,DeepFocus 将能够模拟所需的精确视网膜模糊以生成极其逼真的视觉效果。该平台还演示了 AI 能够帮助解决在 VR 中渲染高度计算密集性视觉效果的挑战。DeepFocus 为未来新型的显示系统解决实际渲染和优化限制打下了基础。


由于 DeepFocus 只依赖标准 RGB-D 颜色和深度输入,它几乎适用于所有现有的 VR 游戏和应用程序。它还兼容目前 VR 研究界在探索的所有 3 种支持调节的头戴式设备:变焦显示器(如 Half Dome)、多焦点显示器(如 FRL之前的产品)和光场显示器。


请点击这里了解更多 Facebook Reality Labs 创建 DeepFocus 的细节。


参考原文:Open-sourcing DeepFocus, an AI-powered system for more realistic VR images;https://code.fb.com/virtual-reality/deepfocus/


2019-01-02 17:117224
用户头像

发布了 199 篇内容, 共 90.2 次阅读, 收获喜欢 295 次。

关注

评论 1 条评论

发布
用户头像
企鹅3362六295林3 高速外..网.梯.子 免.费测...试
2019-01-02 20:33
回复
没有更多了
发现更多内容

底层逻辑:变化背后的不变

石云升

读书笔记 28天写作 12月日更

MySQL锁的分析实战

卢卡多多

28天写作 MySQL 数据库 锁分析 签约计划第二季 12月日更

WAVE SUMMIT+2021为开发者准备的“小心思”,你get到了吗

科技热闻

AfterShip APP 项目数据驱动的演进

AfterShip

数据库 数据 数据驱动

以容器的方式运行极狐GitLab Runner

极狐GitLab

Docker runner 极狐GitLab

【IT运维】公司内网服务器可以远程桌面连接吗?怎么连接?

行云管家

云计算 运维 IT运维 远程运维

老电影和图片变清晰的秘密!分辨率提升400%的AI算法

百度大脑

人工智能

6000字,详解数据仓库明星产品背后的技术奥秘

百度开发者中心

数据库 大数据

Linux一学就会之Centos8系统进程管理 ps管理进程

学神来啦

Linux 运维 linux一学就会 uptime centos8

架构训练营-模块一作业

伊静西蒙

WePack —— 助力企业渐进式 DevOps 转型

CODING DevOps

统一管理 WePack 制品管理 研发构建产物 安全管控

Go语言学习查缺补漏ing Day5

恒生LIGHT云社区

golang 编程语言

国产分布式数据库StarDB核心技术大揭秘二:智能运维管控

京东科技开发者

数据库

中科柏诚持续推进数字网络技术,蓄力元宇宙布局

联营汇聚

数据大屏rem适配方案

CRMEB

开源demo| 智慧协同让企业更便利

anyRTC开发者

音视频 智慧协同 开源demo 远程协助 远程勘查

新思科技推动DevSecOps落地,帮助企业走出“安全孤岛”

InfoQ_434670063458

DevSecOps 新思科技 软件安全

消费医疗门诊的数字化运营

boshi

随笔杂谈

元宇宙浪潮之下,数字身份至关重要

CECBC

Web3.0时代的社交网络会有哪些新变化?

CECBC

元宇宙与电信运营商

CECBC

百度智能云与英特尔携手举办2021 EdgeX中国挑战赛成功落幕

百度大脑

人工智能

基于云的技术架构设计实践-第4篇

hackstoic

运维 云原生 签约计划第二季 业务运维

Camtasia混音教程

淋雨

Camtasia

你知道敏捷团队的迭代目标达成率该是多少吗?

爱吃鱼的小雨

Scrum 敏捷开发 研发管理 内容合集 迭代管理

ReactiveNetwork库时如何实现网络状态监听的

Changing Lin

12月日更

2022年,RPA的5大发展趋势

金小K

区块链 AI RPA 机器人流程自动化 人工智能「

如何避免产品Backlog的这七个常见错误

爱吃鱼的小雨

Scrum 敏捷开发 研发管理 需求管理 内容合集

国产分布式数据库StarDB核心技术大揭秘 一:内核分解之数据分片

京东科技开发者

数据库

五分钟,让你明白MySQL是怎么选择索引《死磕MySQL系列 六》

咔咔

MySQL MySQL高级 索引选择而

和12岁小同志搞创客开发:手撕代码,做一款温湿度检测器

不脱发的程序猿

少儿编程 智能硬件 温度传感器 创客开发 Arduino

Facebook开源了应用于VR渲染的图像系统DeepFocus_AI&大模型_脸书_InfoQ精选文章