Facebook开源DeepFocus算法,为VR提供逼真的焦点变换渲染

VR/AR
2018
12/20
21:42
87870
分享
评论

DeepFocus是Facebook的人工智能驱动的渲染器,据说它可以实时产生自然的模糊效果,是与变焦显示器密切相关的技术。今天,Facebook宣布DeepFocus已经开源。虽然该公司拥有大视场角的原型“Half Dome”可能是专有的,但他们的深度学习工具将是“硬件无关的”。

当你在面前举起手时,您的眼睛会自然地收敛,聚焦于手上。在今天的VR头显中,这种体验并不相同,因为头显中的光源来自固定光源,你的眼睛需要聚焦于很近处才能看清近场图像。这是变焦显示和眼动追踪要解决的问题,可以让固定的焦距可以匹配人的眼睛变得可变,具体取决于你在任何给定时刻所注视的位置。

从本质上讲,这项技术可以让你聚焦于物体,无论它们与你的距离如何,使整体体验更加舒适和身临其境。但是这里的缺失部分是头显并没有复制自然的离焦模糊的能力,也就是当你看着你的手时背景会变得模糊。

Facebook在SIGGRAPH Asia 2018 上发表的一份研究论文中表示,DeepFocus的灵感来自“越来越多的证据表明视网膜散焦模糊在推动调节反应方面发挥的重要作用,以及对深度和物理现实的感知。”

VR,虚拟现实,虚拟现实技术

与基于深度学习的图像分析这种更传统的AI系统不同,DeepFocus据说可以处理视觉效果,同时保持高质量VR所需的超清晰图像分辨率。

这意味着该系统不仅让变焦VR头显与带有光场显示器的AR头显画面看起来更逼真,还可以减轻与聚散度调节冲突相关的眼睛疲劳。

“该神经网络被证明可以仅使用常用的RGB-D图像精确合成离焦模糊、焦点叠加、多层分解和多视图图像,让许多支持调节功能的头显能够实时且接近完美的显示视网膜的模糊效果”,Facebook研究人员说。

VR,虚拟现实,虚拟现实技术

Facebook在一篇博客文章中称,Facebook今天将发布DeepFocus源代码和神经网络训练数据,主要面向“开发新VR系统的工程师、视觉科学家以及其他研究感知的研究人员”。

Facebook Reality Labs首席科学家迈克尔·阿布拉什(Michael Abrash)在Oculus Connect 5上推出DeepFocus,虽然Half Dome和DeepFocus基本上“只是光学和显示器技术革新的开端,但它是进步加速的典范。”

来源:87870

THE END
广告、内容合作请点击这里 寻求合作
VR
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表砍柴网的观点和立场。

相关热点

在过去的几周里,Magic Leap正在加速建设生态系统,在年底前发布了许多新的东西。
VR
在玩VR时感到头晕目眩是大多数人面临的问题,特别是在当下技术不成熟的时候,这种问题愈发严重。但现在身临其境的技术专家Scale-1 Portal推出名为MoveR的新疗法,帮助患有头晕或平衡障碍的玩家进行治疗。
VR
故宫博物院制作的第7部大型虚拟现实作品——《御花园》今天正式发布,拉开了故宫博物院“VR节目观影周”的序幕。“V故宫”全国巡展计划也将于明年5月启动。
VR
12月20日,由张艺谋、齐笑和王磊共同创办的线下VR娱乐公司当红齐天宣布获得来自英特尔的战略投资。此次融资将用于基于定位系统VR技术的内容研发应用,开发包括大空间多人行走在内的,以VR、AR、MR技术为核...
VR
根据株式会社user local发布的数据,截止到12月19日,Vtuber(虚拟主播)已突破6000名。
VR
最新文章

相关推荐

1
3