空间计算和沉浸式体验，我们来了

VR 在科技热词方面可能一直不温不火，但最近它被重新命名为空间计算，这很可能预示着人们对它的兴趣在上升。

今年，许多大型科技公司都推出了一系列新的虚拟现实/空间计算硬件，潮流似乎正在发生转变，但这是否足以在这个曾经出现过许多错误曙光的领域实现突破呢？我们来看看这方面的一些关键创新。

变革者-苹果 Vision Pro

该领域最大的新闻莫过于苹果公司的 Vision Pro，部分原因是库比蒂诺科技巨头在相关市场的主导地位，部分原因是其对竞争对手的激励作用。正如该公司自 iPhone 取得成功以来的一贯做法，Vision Pro 提供了一套市场领先的规格，并采用了令人向往的镁合金和碳纤维设计，这将使许多人把目光投向 350 万美元的可观价位之外。

苹果 Vision Pro 的 MicroOLED 面板可提供每英寸 3,386 像素（ppi）的 4K 观赏体验（4K UHD 的消费者标准为 3,840 像素），与目前的竞争对手相比毫不逊色，如 Meta Quest 3（约 1,218 ppi）和 HTC Vive Pro（950 ppi）。苹果还加入了视频直通功能，使 Vision Pro 可用作 AR 设备，在我们的日常环境中叠加应用程序和视觉提示，还可用作传统的 VR 显示屏，用于娱乐、商业数据等–苹果首席执行官蒂姆-库克（Tim Cook）曾多次表示，他认为 AR 在未来将非常重要。

空间计算和沉浸式体验，我们来了 — Apple Visions Pro：以 House of the Dragon 为特色的应用体验

Dimension 工作室联合创始人兼联合首席执行官 Simon Windsor 也认为：”目前，戴着头显或智能眼镜到处走动还有点不寻常。但是，很多人在家里都会觉得这样做很舒服，因为像 Apple Vision Pro 这样的技术具有令人兴奋的潜力，可以完全重新想象我们体验电影、电视或现场娱乐的方式，我们看到娱乐工作室和媒体公司对这种技术有着广泛的兴趣和探索，它可以推动电影和电视内容进入一个全新的创意领域。

“苹果公司正在为我们如何在客厅里享受和消费内容而努力，它在说’嘿，坐下来享受更丰富、更令人惊叹的身临其境的体验吧’。通过在 Apple Vision Pro 上使用 AR 和 VR 应用程序，我们可以轻松便捷地获得更多身临其境的体验，这自然会影响到我们消费内容的制作方式。”

苹果公司并非唯一撼动市场的公司，高通公司（Qualcomm）也在 CES2024 上大放异彩，推出了全新的 Snapdragon XR2+ Gen 2 VR 芯片组，”这是一种单芯片架构，能以每秒 90 帧的速度实现 4.3K 空间计算”。值得注意的是，三星在发布会上引用了谷歌的一句话，这意味着双方很快就会推出与 VR 相关的产品： “三星很高兴能与高通技术公司和谷歌合作，再次掀起移动行业的革命”。三星电子副总裁兼技术战略团队主管 Inkang Song 在一份声明中说。

索尼不仅为苹果提供 Vision Pro 的 MicroOLED 面板，还与西门子合作开发了一款专为创意社区设计的 VR/AR 头显。据该公司称，该沉浸式空间内容创作系统包括一个 XR 头戴式显示器，配备高质量 4K OLED Microdisplays 和视频透视功能，将于 2024 年晚些时候上市。

生态系统的力量

尽管 Meta 多年来竭尽全力，但生态系统往往是更广泛采用空间计算的挑战之一，也是取得更大成功的关键阻碍因素。苹果公司承诺在 Apple Vision Pro 发布时，通过 App Store 平台为其提供 600 多款沉浸式应用程序和游戏，其中包括体育和娱乐类应用程序。

其中包括一款 NBA 应用程序，篮球迷可以同时直播或点播多达五场比赛；以及 PGA TOUR Vision，该程序在真实高尔夫球场的 3D 模型上分层使用实时击球跟踪功能，并提供关键统计数据，从而在用户空间中呈现栩栩如生的巡回赛。

美巡赛数字运营高级副总裁 Scott Gutterman 在一份声明中说：”借助 Apple Vision Pro 和强大的空间计算能力，苹果公司为我们提供了一种创新的、身临其境的职业高尔夫体验方式。PGA TOUR Vision 是第一款为 Apple Vision Pro 开发的高尔夫应用程序，它可以将球迷带入围绳内，并直接进入从圆石滩到 TPC 锯齿草等世界最具标志性球场的果岭，无论他们身在何处。”

在娱乐方面，有迪斯尼+、提供 2D 和 3D 内容的 IMAX、华纳兄弟 Discovery’s Max（提供 4K 和杜比 Atmos.2 空间音频）以及 Apple TV。后者包括 Apple Immersive Video，可提供 180 度、8K 3D 录音和空间音频。

Windsor继续说道： “对于电影制作人和故事讲述者来说，让用户能够选择自己的屏幕尺寸和虚拟观看环境，将带来无限的创作可能。因此，我们将看到创作者越来越多地采用三维和混合现实制作技术来创建三维内容，这些内容可以延伸出屏幕，将观众完全包裹在虚拟现实中。简而言之，用户将穿过画面，置身于他们喜爱的电影和电视节目中，而不是从外面观看，或者 3D 内容将走进家庭，无缝地了解我们的环境和背景。“

新出现的体积格式

V-Nova 是一家坚定地站在生态系统管道一边的公司，它在 2023 年底收购了 Parallaxter 公司，获得了该公司的 PresenZ，据 V-Nova 称，这是一种体积电影格式，可以从标准动画管道预渲染 6DoF 图像。

通过 LCEVC MPEG-5 视频增强标准和 VC-6 制作编解码器，该公司已经在 VR/XR 领域占据了重要地位，此次收购为该公司注入了新的动力，并计划在 2024 年期间建立一系列具体的合作伙伴关系和使用案例。

V-Nova Studios 高级副总裁 Gianluca Meardi 告诉 IBC365：”目前，我们正在与大多数大型公司合作–梦工厂就是其中之一，因为他们已经展示了一些[使用该格式]的短片内容–他们展示了《驯龙高手》中一个场景的转换和《可恶》中的几个场景–这些场景仅仅是个开始。”

虚拟现实产业一直面临的一个关键挑战是传输机制，因为要传输高分辨率的 360 内容，必须要有超大的文件，这使得按需传输成为一个后勤障碍。另一个瓶颈是终端设备的处理能力–正如 Meardi 所说，终端设备的处理能力远不及高端 GPU 或游戏机，因此提前处理流媒体成为实用传输系统的关键组成部分。

“这就是我们启用云流媒体的原因，这样我们的内容就可以在云端传输和处理–例如，从 Nvidia cloud XR，然后使用我们的视频压缩技术（如 MPEG-5 LCEVC），通过家中的 WiFi 流媒体传输到最终设备。我们在上届 IBC 上展示了这一技术，在这种情况下，你不需要比 MetaQuest three 更好的设备来体验这些身临其境的电影。Meardi 解释说：”在我看来，未来我们所有内容的主要业务渠道将是云，例如 Netflix 或任何 OTT 服务。“

他还指出，最近 SAG AFTRA 的罢工凸显了一个潜在的机会。他说：”如果你考虑到几个月前发生的罢工，那么新内容的制作就会停止，现在好莱坞的很多大公司都在为缺乏新作品而苦恼。这对他们来说是个问题，但对我们来说也许是个机会，因为有些动画公司和视觉效果公司可以考虑用我们的新格式转换现有内容并从中获利……”

现实世界出现广播应用

虽然最终用户对空间计算的需求可能还处于增长的初期，但在汽车设计、石油和天然气等复杂（潜在危险）领域的培训等方面，行业用例已得到充分记录。不过，特技和制作公司 ATS 也看好 VR 的发展前景，该公司曾利用 VR 设计了第一届美国忍者世界杯的场景。

“我们查看的所有 VR 模型都是用 SketchUp 制作的。我们使用 SketchUp 设计布景的基础已经有 10 年左右的时间了，从预览到预算、原型设计、最终设计，甚至实际的布景制作，每一步都使用 SketchUp。我发现另一家名为 Sentio 的公司为 SketchUp 开发了一个插件，可以在 VR 中快速方便地查看 SketchUp 模型，这就是整个过程的起因”，The ATS Team 首席执行官 Nate Moore 解释道。

“我对 VR 的最初探索实际上是在一次推介会上的谈话中受到的刺激，当时电视台对在节目中加入 VR 元素很感兴趣。我对 VR 知之甚少，所以购买了一台 MetaQuest 2 来了解更多。我最初只是从 SketchUp 中查看我们的一个 3D 模型来消遣，但很快我就意识到它的实际作用。我为即将到来的《忍者勇士》赛季加载了一个模型，我发现在电脑上查看 3D 模型时，我们忽略了一些错误。有些细节，比如障碍物或甲板的高度，在 VR 中很容易注意到，而在电脑上除非使用程序中的测量工具，否则是无法发现的。在 VR 中，我可以快速站在平台上，立即知道高度是否有偏差，因为我观看模型的视角是基于我的实际高度的。“

Moore 还认为，VR 可以加强布景设计项目的沟通，管理期望值，确保成品完全符合节目或剧集制作人的预期。

“有时在推介会上也很难在顷刻间传达你已经构建了几个月的世界，但在 VR 中观看布景可以快速传达你的愿景，而不会产生任何误解。同样的流程也有助于与现有客户沟通，让他们了解我们对片场的规划，这样他们在进入片场时就能清楚地知道该期待什么。制片人在拍摄现场遇到的令人恼火的意外越少越好。“

他继续描绘了虚拟现实技术未来的应用场景，随着设备功能越来越强大，越来越容易获得，而且总体上越来越商品化，这种应用场景就更有可能出现。”这项技术的发展速度令人难以置信。我相信用不了多久，我们就能到实际拍摄地点进行考察，并在实际拍摄地点观看全尺寸的 3D 场景渲染。这就意味着，你可以在一个全尺寸的场景中走动，不仅能清楚地知道场景的样子，还能知道所有背景的样子。这意味着，在导演或制片人决定他们想要的镜头时，不用在现场搭建所有东西，然后用重型设备在现场移动，而是可以提前虚拟完成所有工作，因此，当我们的工作人员到达现场时，我们已经清楚地知道应该在哪里搭建，以获得他们想要的准确镜头。这样的小创新可以节省更多的时间和金钱”，Moore总结道。

总之，VR 或空间计算的发展显然已经进入了一个重要的转折点。从潜在的游戏改变者到流行语，典型的技术弧线已经走过，但随着人们对现实世界的应用、格式和竞争日益激烈的设备制造商达成共识，似乎有了一个明确的发展方向-——沉浸式体验，我们来了。