AI实践哪家强?来 AICon, 解锁技术前沿,探寻产业新机! 了解详情
写点什么

Facebook 开源了应用于 VR 渲染的图像系统 DeepFocus

  • 2019-01-02
  • 本文字数:814 字

    阅读完需:约 3 分钟

Facebook开源了应用于VR渲染的图像系统DeepFocus

DeepFocus 是一个由 AI 驱动的新框架,用以在 VR 中渲染自然逼真的对焦效果。DeepFocus 可以与高级原型头戴式设备配合工作,实时显现不同焦距下的模糊效果。例如,当佩戴受 DeepFocus 支持的头戴式设备的人观看附近的物体时,它立即聚焦清晰地显示出来,而将背景物体虚化,就像在现实生活中的体验一样。这种散焦模糊(也称为视网膜模糊)对实现 VR 中的真实感和深度感知是非常重要的。DeepFocus 是首个能够为 VR 应用程序实时生成这种效果的系统。现在,Facebook 宣布开源工作和数据集,以帮助 VR 研究界的其他人员。

它的工作原理:

像使用累积缓冲器这样的传统方法能够实现物理上的精确散焦模糊。但是,它们无法为复杂丰富的内容生成实时效果,原因是这样的处理需求即使对最先进的芯片来说也很难做到。相反,Facebook 利用深度学习解决了这个问题。他们开发了一种新颖的端到端卷积神经网络,在眼睛看到某个场景的不同部分时,该网络会生成具有精确视网膜模糊的图像。该网络包括保持容量的新交织层,以在完全保留图像细节的同时减少输入的空间维度。然后,该网络的卷积层以相同的、降低的空间分辨率运行,并且运行时间明显减少。

它的重要意义:

随着对新的 VR 头戴式设备的研究进展,DeepFocus 将能够模拟所需的精确视网膜模糊以生成极其逼真的视觉效果。该平台还演示了 AI 能够帮助解决在 VR 中渲染高度计算密集性视觉效果的挑战。DeepFocus 为未来新型的显示系统解决实际渲染和优化限制打下了基础。


由于 DeepFocus 只依赖标准 RGB-D 颜色和深度输入,它几乎适用于所有现有的 VR 游戏和应用程序。它还兼容目前 VR 研究界在探索的所有 3 种支持调节的头戴式设备:变焦显示器(如 Half Dome)、多焦点显示器(如 FRL之前的产品)和光场显示器。


请点击这里了解更多 Facebook Reality Labs 创建 DeepFocus 的细节。


参考原文:Open-sourcing DeepFocus, an AI-powered system for more realistic VR images;https://code.fb.com/virtual-reality/deepfocus/


2019-01-02 17:117232
用户头像

发布了 199 篇内容, 共 90.3 次阅读, 收获喜欢 295 次。

关注

评论 1 条评论

发布
用户头像
企鹅3362六295林3 高速外..网.梯.子 免.费测...试
2019-01-02 20:33
回复
没有更多了
发现更多内容

2021团体程序设计天梯赛总结

玄兴梦影

算法 总结 比赛

Python OOP-3

若尘

oop Python编程

截图软件Snipaste超好用的贴图功能,在别的软件也能拥有 | 窗口置顶工具

彭宏豪95

效率 工具 windows 4月日更 窗口置顶

区块链电子发票的多维创新与变革效应

CECBC

电子税务

前端架构演进 - 从单体到微前端(理论篇)

Teobler

大前端 架构演进

产品文档和原型怎么弄?——课堂笔记

Deborah

Spring 实战:通过 BeanPostProcessor 动态注入 ID 生成器

看山

Spring实战

第八次课程总结

小匚

产品经理训练营

Redis 持久化

叶佳欣

redis持久化

Golang 常见架构模式

escray

学习 极客时间 Go 语言 4月日更

Dubbo 直连提供者

青年IT男

dubbo

如何运用“区块链”,让档案数据管理更安全

CECBC

数据安全

Spring优缺点

风翱

spring 4月日更

聪明人的训练(二十五)

Changing Lin

4月日更

把黄金圣衣交给圣斗士:HDC.Cloud 2021的硬核春天

脑极体

2.7w字!Java基础面试题/知识点总结!(2021 最新版)

JavaGuide

Java 面试

稻盛和夫的管理绝活:阿米巴经营模式

石云升

团队建设 28天写作 职场经验 管理经验 4月日更

源中瑞区块链BaaS平台搭建,为企业开发应用提供技术支撑

源中瑞-龙先生

区块链 源中瑞 Baas

postman的url编码问题

箭上有毒

4月日更

产品经理训练营学习总结

新盛

话题讨论|华为云再报大动作,云厂商未来战场在哪里?

程序员架构进阶

话题讨论 28天写作 4月日更

HashMap 源码分析

大海

Java HashMap底层原理

“拼多多”值得我们学习

小天同学

思考 拼多多 自我感悟 4月日更

工作三年,小胖连 Redis 持久化都不知道?真丢人!

一个优秀的废人

redis 持久化 aof rdb

KubeFed集群联邦

ilinux

Kubernetes 容器 云原生 kubernetes联邦

一念三年,心机流转|靠谱点评

无量靠谱

区块链链接能源:到底是乌托邦愿景还是未来蓝图?

CECBC

能源

小白也能看懂的操作系统之内存

程序猿阿星

操作系统 内存 内存管理 内存优化

网络协议学习笔记 Day4

穿过生命散发芬芳

网络协议 4月日更

MySQL事务机制是如何实现的?

冰河

MySQL 事务 Binlog Redo Log Undo Log

ConcurrentHashMap 源码分析

大海

ConcurrentHashMap

Facebook开源了应用于VR渲染的图像系统DeepFocus_AI&大模型_脸书_InfoQ精选文章