微软为HoloLens全息视频提出二次投影技术,改善流式传输带宽和质量

VR/AR
2019
02/23
13:58
映维网
分享
评论

如果有关注与VR相关的技术文章,你可能曾多次见过“二次投影(reprojection)”这个术语,如交错二次投影或异步二次投影。二次投影是为了解决VR游戏的苛刻性能要求,旨在填补无法及时渲染的帧。比方说一款游戏不能达到标准的90fps,这时交错二次投影将“强迫”其降至45fps,并在这基础下每隔一帧进行一次重新投影,从而实现90fps的帧率。作为交错二次投影的升级版,异步二次投影则是智能地插入一帧,从而有效减少画面抖动并使得体验更为流畅自然。

现根据微软的一份最新专利,这家科技巨头似乎有意为全息视频采用类似的二次投影技术,以改善流式传输的带宽/质量。

发明文件显示,诸如HoloLens这样的MR头显在视频压缩和传输实况视频方面存在一定的挑战,如带宽。另外,一系列现有的视频压缩技术都依赖于这样一个概念:连续视频帧的大部分背景从一个视频帧到下一个视频帧时保持相对静态,因此只有实际变化的像素需要传输。但对于头戴式显示器,头部移动可导致图像数据(包括背景)中更频繁和更大幅度的变化,这降低了已知视频压缩技术的有效性。

因此,MR头显需要一种可以减少带宽要求和/或提升分辨率的技术,亦即微软在名为“Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality(二次投影全息视频以改善流式传输带宽/质量)”的发明文件中所描述的技术。

具体来说,微软描述的技术适用于具有摄像头和深度传感器的全息设备。在将数据传递到计算P帧(或B帧)的视频压缩器之前,流式传输应用程序执行应用于先前帧的图像扭曲3D变换。系统将利用camera的已知3D位置和camera前面的3D几何形状,并基于camera的当前位置重新投影前一帧,而不是花费时间和资源来完全重新渲染一帧,从而减少发送流式视频的数据带宽。

相关专利:Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality

尽管这只是一份专利,但考虑到“Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality(二次投影全息视频以改善流式传输带宽/质量)”是于2017年1月提交,所以如果马上就要在MWC大会亮相的HoloLens 2搭载了这项技术,我们将不会感到惊讶。

原文链接:https://yivian.com/news/57048.html

来源:映维网

THE END
广告、内容合作请点击这里 寻求合作
VR
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表砍柴网的观点和立场。

相关热点

沉浸式工具开发团队VIM AEC通过Twitter表示,Magic Leap宣布为其提供了一大笔资金资助(未公布金额),以帮助他们继续为Magic Leap的空间计算平台开发内容。VIM(Virtual Information Modeling;虚拟信息...
VR
这笔投资可以帮助Cooperative Innovations扩大团队规模并为首个商业工具与技术Ikabod推出试点授权计划。另外,这家工作室将利用融资继续开发原创的MMORPG VR游戏《Raiders of Erda》和另一款尚未发布的多...
VR
如果想体验面向高端VR头显的VR游戏和沉浸式体验,但又被其高昂的价格标签拒之门外,你可能会对本周Relativity的一个新开源项目教程感兴趣。所述的教程详细介绍了如何以大约100美元的成本来DIY自己VR头显。
VR
尽管全世界一直都在等待5G的真正登场,但一个全新的,可以说是更为重要的无线网络几乎已经来到我们面前:WiFi 6。三星已经在日前举行的Galaxy Unpacked大会宣布了最新旗舰机型的支持。在另一边厢,苹果尚...
VR
MR初创公司太若科技(Nreal)宣布已完成1600万美元的A+轮融资,由光大控股新经济领投,爱奇艺,顺为资本,华创资本跟投。
VR

相关推荐

1
3