TVBEurope 采访了 Immersiv.io 联合创始人 Emmanuelle Roger,了解该公司如何为英国和日本的球迷带来观看 FIFA 世界杯的全新方式。
借助 FIFA 的 3D 实时追踪数据,英国和日本的球迷将体验到今夏 FIFA 世界杯的全新方式。
总部位于巴黎的 Immersiv.io 正在与英国的 BBC 和日本的 DAZN 合作,提供沉浸式 3D 体验。
该公司由工程师兼体育爱好者 Stéphane Guérin 和 Emmanuelle Roger 于 2016 年共同创立,其愿景是利用沉浸式技术重塑体育迷体验。
“ Immersiv.io三年前就开始构建其 3D 平台 (ARISE),当时骨骼数据开始被各大联赛测试和部署,”Roger 告诉TVBEurope。
该平台已在多种运动项目中进行了测试,包括冰球、网球、篮球、美式橄榄球,并在多种平台上进行了测试(移动设备、网页、Meta Quest、Apple Vision Pro、三星 Galaxy XR)。
比赛期间,实时骨骼数据会被导入平台,然后转化为比赛的交互式实时3D模型。“骨骼数据包含每个球员的多个坐标,这些坐标每秒发送多次,描述了球员的实际运动,”罗杰解释道。“这些数据由体育场内设置的摄像头捕捉;这部分工作并非由Immersiv.io负责,而是由与联赛/赛事签约的追踪服务提供商完成。”
然后,这些数据被映射到球员的虚拟形象上,这些虚拟形象在 3D 环境中进行动画处理,以重现真实的比赛。“我们开发了一套流程,可以根据球员(和裁判)的头像和身高/体重,大规模地生成他们的虚拟形象。
“与此同时,我们从广播公司获取实时音频,并将音轨与 3D 重建模型同步。我们开发了专门的技术,可以自动将视频或音频与骨骼和统计数据同步。”
该工作流程同时运用了人工智能和机器学习技术,用于生成玩家头像以及将视频/音频与数据同步。“这部分对于用户体验至关重要,而且通常非常复杂,因为数据和视频/音频的制作工作流程完全不同。”
“我们还制定了相关流程,以改进和修复从数据提供商处接收的数据。由于这些数据是实时采集的,因此有时会出现不一致、玩家追踪不准确或数据抖动等情况。我们使用人工智能工具来尽可能地改进3D重建效果。”

在 BBC 的 3D 环境中,粉丝可以选择观看内容,包括广播视角、战术视角、第三人称玩家视角和第一人称视角。
Roger 补充道:“为了给用户提供更多见解,我们会根据所选视角(控球球员、传球可能性、到球门的距离、阵型线)在 3D 回放上叠加指标/指示器。”
终场哨响后,赛后体验(3D精彩集锦和完整回放)即可立即上线。由于两者都基于比赛期间接收到的数据进行回放,因此无需额外处理。“ BBC或DAZN可以自行决定比赛从直播状态切换到赛后状态的速度。”
对于英国球迷来说,BBC的3D体验服务可以通过电脑或BBC体育应用程序提供完整的比赛回放和精彩集锦。在日本,DAZN在其中场休息和赛后报道中使用了这项技术,从不同角度剪辑同一动作的多个3D回放片段。
当被问及是否认为这是观看体育赛事的未来时,Roger 表示,随着科技和人工智能的进步,她相信3D重建技术在未来几年会不断改进。“我们的愿景是,它最终能够达到视频的逼真程度,并彻底改变比赛的制作方式和球迷的观赛体验!”
本文来自作者投稿,版权归原作者所有。如需转载,请注明出处:https://www.nxrte.com/zixun/68944.html