澳门新濠影汇_首页

您的位置:澳门新濠影汇 > 科技中心 > 原创 将支持VR培训远程管理,Pixvana推SPIN Guide头显

原创 将支持VR培训远程管理,Pixvana推SPIN Guide头显

2019-10-09 21:13
  1. 云端的VRWorks

据悉,VMware的物联网部门将利用SPIN Guide培训全球的营销团队,该公司认为,VR是很强大的培训工具,它可以提高培训效率和知识存留率。而SPIN Guide将帮助他们更好地引导和控制培训的进度和效果,同时也可以使用Analytics模块对员工培训进行实时分析。

图6:Guide Mode

澳门新濠影汇 1

我们基于云端的方法存在四个重要的局限性。首先,我们对GPU的控制有限。其次,我们必须维护一个基于Web的VR编辑器。第三,我们需要管理一系列服务之间的协同工作。最后,用户必须上传源视频,而这可能是一个耗时的过程。

而SPIN Guide功能的特点是,它可以让你回放或同步观众端的体验,在必要的时候可以引导他们的视线。这项功能非常适合在活动中使用,不管是连接局域网还是互联网都可以使用。

渲染和编码

据青亭网了解,SPIN Studio支持云端编辑VR内容,而且用户可通过链接将交互式360° VR内容发送到手机或电脑中,然后你可以用手或鼠标来拖动场景,你也可以将这些内容内嵌在网页上。

Pixvana同时创建了一套工具来解决VR创建者面临的主要问题。亮点包括通用播放器,头显内后期处理工具,以及基于Web的编辑与管理系统。云计算令所有这些创新成为可能。这个基于云端的VR视频编辑平台以英伟达的VRWorks为核心,同时将成为Pixvana实现XR故事叙述潜力的方式。

澳门新濠影汇 2

尽管等量矩形是360度视频的标准格式,但它存在明显的缺点,包括图像最高点区域和最低点区域的像素浪费。所以除了等量矩形视频外,我们同时支持多种包含不同几何形状和打包方式的专业格式,如菱形平面和FOVAS(视场自适应流式传输)。菱形平面是一种特殊的投影格式,可以缩减数据大小。FOVAS则采用特殊的平铺格式和流媒体技术。即使用户转头,它都可以在活动视场中提供高分辨率内容。所述格式旨在克服标准视频的限制,最终目标是在较低带宽下生成更高质量的视频。

同时,SPIN Guide也能让你管理用于演示的头显状态,比如它们是否正确下载内容,或者串流视频是否顺畅,你还能查看头显的电量。目前,SPIN Studio仅支持本地网络共享,在未来Pixvana还将推出对远程互联网共享的支持。

光场是另一种VR视频技术,可以在六自由度环境中提供完全复制的实时捕捉。

近期,Pixvana宣布在VR视频创作和分发平台SPIN Studio中加入新功能:SPIN Guide。据悉,该功能可让内容创作者看到用户视角,并对其进行引导。

FOVAS方法则需要创建同一视频的多个视图,而每个视图都可以调整至特定的浏览方向。然后,播放器根据需要切换至正确的视频。

澳门新濠影汇 3

图3是海滩情景的等量矩形投影。请注意,最高点位置和最低点位置的畸变情况。所述像素都是过度采样,需要更多的带宽进行传输,而这是一种浪费。

图8:校准流程示例

兼容所有主要VR头显的视频播放器,方便进行视频分发。

2.1 VRWorks的工作原理

图7:SPIN Plau允许你创建交互式360度视频

1.2 基于云端的系统:分发,后期制作和处理

现在我们来讨论如何利用VRWorks和基于云端的处理来优化VR视频制作。我们同时将介绍在这一过程中开发出的最佳实践。

各个摄像头捕获的视频这些视频视图需要校准,曝光补偿,并在名为“拼合”的过程中进行组合,如图2所示。其他后期制作功能允许编辑者对图像进行细化操作,旋转和颜色校正。拼合和处理一系列图像会产生通常为8K或更大的等量矩形视频。

设置校准选项

澳门新濠影汇 4

将输入图像指针传输至校准实例

为了提高360度视频的用处和吸引力,我们添加了创建交互式视频的工具,如图7所示。制片可以在VR里面编辑交互式视频,并直接在头显中为最终浏览环境添加端口,图形和文本。

澳门新濠影汇 5

图11:SPIN Studio的云处理为360度视频提供了大量的并行处理

澳门新濠影汇 6

澳门新濠影汇 7

SPIN Play提供两种播放模式:Share Mode和Guide Mode。Share Mode用于短期浏览,例如与远程同事协作。要访问这一模式,你只需在视频播放器中输入唯一的九位密码,如图5所示。所述密码可以标识相应的播放列表。接下来,用户可以进行完全控制,并且能够轻松退出共享会话。

随着视频处理量的增加,我们正在寻求利用机器学习和人工智能来探索360度电影制作的可能性。

(映维网 2019年04月23日)Pixvana基于云端的VR管道现在包含了NVIDIA VRWorks 360 Video SDK。Pixvana希望利用云计算的力量来帮助解决VR创意人士所面临的诸多挑战。Pixvana VR管道的亮点包括:

分发是球形视频创作者面临的主要挑战之一。目前最先进的技术是将视频侧载至各台设备。但这需要相当漫长的时间,并且需要头显和视频制作者位于同一位置。Pixvana的SPIN Play功能简化了这个工作流程,支持远程管理和跟踪变化。它同时允许在未网时将完整内容下载至配对的头显并进行播放。

澳门新濠影汇 8

将拼合器的拼合图像复制到outputRGBA

nvssVideoStitch底层拼合器函数同样易于调用。下面是粗略的示意性步骤,并不代表最佳工作流程:

为继续提升电影制作体验与质量,Pixvana致力于改进我们基于云端的VR管道。

曝光补偿是VR视频的一个重要问题。由于在室外拍摄360度场景将包括太阳光和阴影,因此动态范围会发生很大变化。相机传感器的动态范围有限,所以相机装置中的每个摄像头通常会自动设置曝光。对于最终的拼合图像而言,重叠的区域会出现不同的亮度。我们测量亮度差异,并且进行曝光补偿,然后再将它们传输至VRWorks拼合器。Pixvana正在与英伟达团队合作优化拼合器,并提供更多的控制和功能以产生更好的拼合。

澳门新濠影汇 9

澳门新濠影汇 10

销毁校准实例

校准,或确定旋转和扭曲输入图像的规则

图2:SPIN Studio后期处理工具和360度拼接工具

澳门新濠影汇 11

编辑,裁剪,颜色处理,拼合调整,以及定向

澳门新濠影汇 12

为了解决将文件传输至云端系统的问题,Pixvana为Windows和Mac OS开发了云摄取功能和桌面上传器。桌面上传器在中断后可以恢复(如网络丢失或系统断电),从而为用户提供了最大的灵活性。上传器同时理解文件夹层次结构,可以在云端复制用户定义的文件结构。上传状态将同时报告给Web UI和上传器,允许远程编辑器跟踪进度。

澳门新濠影汇 13

澳门新濠影汇 14

图3:海滩情景的等量矩形投影

澳门新濠影汇,执行拼合

处理VR视频所需的系统性能是VR创作者面临的又一重大挑战。典型的VR相机装置由大约六个或更多高分辨率的摄像头组成。无论编辑决策如何,摄像头图像都必须对齐,拼合,并渲染成最终的超高分辨率视频。这需要大量的处理能力。英伟达显卡明显是个正确的解决方案,但渲染所需的性能和时间大幅度占用了工作站。一些编辑工作者得不得在一天工作结束后令设备继续处理,从而影响了工作流程。

澳门新濠影汇 15

本文由澳门新濠影汇发布于科技中心,转载请注明出处:原创 将支持VR培训远程管理,Pixvana推SPIN Guide头显

关键词: 澳门新濠影汇