随着音乐节不断拓展其数字化影响力，一项全新的跨行业创新项目正在探索能否将沉浸式技术推向更高层次。该项目名为 IFeL：沉浸式音乐节直播——大规模远程在场（Immersive Festival Live – Remote Presence at Scale），汇集了广播机构、技术公司、高校及创意合作伙伴，共同探索空间音频、XR（扩展现实）、增强现实和超低延迟视频如何将被动式直播转化为共享体验，让远程观众能够与艺术家和粉丝实时互动。
该项目是 IBC 加速器媒体创新计划（IBC Accelerator Media Innovation Programme）的一部分，利用空间音频、扩展现实（XR）和低延迟视频，让远程观众能够从场馆内的多个视角体验活动现场。同时，现场的粉丝和艺术家也能与虚拟观众实时互动。
该联盟汇集了多位”重磅”成员，包括媒体、娱乐和学术机构：BBC、ITV、欧洲歌唱大赛主办方 EBU（欧洲广播联盟）、MIT Reality Hack、SMPTE（电影电视工程师协会）、伦敦国王学院、南安普顿大学、戈尔韦大学，以及多元文化音乐合奏团 The Third Orchestra。提供支持的技术合作伙伴包括 Shure、虚拟现实专家 Surround Sync 和初创公司 RePro Stream。
该团队正在利用空间音频、XR 和低延迟视频，让远程观众从场馆内的多个视角体验活动，同时让现场的粉丝和艺术家与虚拟观众实时互动。
运作方式
这一充满雄心与创意的加速器项目将致力于打造一套从端到端的沉浸式音乐节直播工作流程，融合多视角视频、视点感知空间音频和互动式观众参与。
项目将在现场进行一系列概念验证（POC）拍摄，将音乐节直播转化为双向、互动、共享的沉浸式体验——通过 VR 和沉浸式音频让粉丝沉浸到真实观众之中，同时通过 AR（增强现实）让现场观众看到虚拟粉丝。
项目计划提供来自观众区和后台的高品质 UHD VR 视角（通过斯台迪康摄像机拍摄），以及来自舞台的视角（通过机器人摄像机拍摄），虚拟粉丝可以体验在场馆现场采集的完整沉浸式音频，并与音乐会主信号混合。
与此同时，佩戴 AR 眼镜的粉丝和艺术家将能够在人群中看到虚拟参与者的化身，仿佛他们就在现场。这一体验的核心目标是基于宽带基础设施的实时双向信号传输，让大规模虚拟粉丝和现场观众都能实时互动，在物理和虚拟环境中共享同一时刻。
为探索行业离实现这一愿景还有多远，Headliner 采访了来自 IBC 加速器媒体创新计划、BBC、ITV Studios、Surround Sync 和 Shure 的专家。
他们共同讨论了沉浸式音乐节直播的技术与创意挑战、空间音频和 XR 的作用、这些技术可能带来的商业和 accessibility（无障碍）机遇，以及为何现场音乐体验的未来可能远比当今传统广播更具互动性。
采访对话
IFeL 项目旨在创造物理观众与远程观众之间真正的共享体验。这与标准直播或 VR 演唱会体验有何根本性不同？
Briege Whitehead，Surround Sync 联合创始人：
关键区别在于，这个项目关注的是共享在场感，而不仅仅是内容传递。传统直播让观众能够远程观看活动，而许多 VR 体验本质上仍然是孤独的体验。沉浸式体验真正强大的地方在于，它能够创造一种与他人共同身处某处的感觉。这种社交连接往往与内容本身同样重要。
我们通过自己的沉浸式影院体验反复看到了这一点，观众不仅对虚拟环境作出反应，还对与他人共享这些体验这一事实作出回应。IFeL 在此基础上进一步探索物理观众与远程观众如何同时参与同一场活动，创造出超越传统广播模式的新型互动方式。
空间音频在让远程观众与现场活动环境产生情感和身体上的连接方面有多重要？
Nick Kennedy，BBC 研发工程师：
它是发自内心的，它是最能产生强烈情感的感官，而且任何拥有一副最基本立体声耳机的人都能获得。你可以让任何人听一段双耳录音，他们脸上的表情就会告诉你空间音频有多重要。而这还仅仅是双耳录音。当你从那里进阶到能在声场中转动头部，再到完整的六自由度，奇妙的事情就会发生。
BBC 和合作伙伴多年来开发了诸如音频定义模型（Audio Definition Model）等空间音频编码标准，而支持三自由度或六自由度的消费级技术也日益主流化。我们希望这种体验能尽可能让更多人获得，无论他们使用什么技术。
它为艺术家释放的可能性是不可思议的，艺术家站在高台上面对静态观众，这在音乐史上其实是一个相对较新的概念。你可以被来自四面八方（上方和下方）的音乐和声音所环绕，这一想法释放了巨大的创作可能。
远程观众以全息或 AR 形式出现在场馆内，这个概念感觉尤其前卫。这个概念是如何演变的？它能为艺术家和音乐节主办方解锁哪些创意可能？
Tim Guilder，ITV Studios 制作技术负责人：
超越噱头之外，远程能力、AR 体验以及将内容直接送达消费者，是许多企业一直在转向的领域，这几乎正在成为一种期望。如果执行得当，这个项目可以创建一个蓝图，为艺术家和场馆解锁新的商业机遇和收入流，超越演出物理空间的限制和容量。
传统音乐节直播往往捕捉了演出本身，却不一定能重现亲临现场的那种情感感受。为什么为广播机构和活动主办方重现那种情感连接一直是如此大的挑战？
Muki Kulhan，IBC 加速器媒体创新计划创新负责人：
广播机构和创意制作团队比以往任何时候都更加意识到，粉丝在现场活动中能感受到的情感与在远程环境中能感受到的情感截然不同。试图远程重现现场演出没有”一刀切”的解决方案，所以这是一项棘手的任务，尤其是随着观众变得越来越挑剔和要求越来越高。
这个才华横溢的团队不仅解决了空间音频和 180/360 度视觉效果在直播和采集方面的技术挑战，还专门关注了为粉丝、艺术家和活动主办方创造令人难忘、引人入胜的体验的情感挑战，特别是拥抱沉浸式音频的力量。
今年，我们有幸与蒙特勒爵士音乐节（Montreux Jazz Festival）以及多才多艺、富有创新精神的乐队 Vulfpeck 密切合作，他们在主舞台上演出，并将现场制作经验扩展到让粉丝（包括现场和远程）成为其动态现场演出的一部分。
该项目探索了来自人群、后台和舞台本身的多个视角。让观众掌控视角如何改变现场音乐直播的叙事潜力？
Nick Kennedy，BBC 研发工程师：
我们是高度社交的生物。但我们各有不同，我们都喜欢拥有选择。参加一场活动时，有些人想深入人群最密集处，另一些人则想退到高处看台，俯瞰全局。人们会在一个晚上根据心情在不同位置之间切换。
给予终端用户选择并不会取消导演的角色，但肯定会改变它。在传统电视广播中，摄像师选择镜头，导演在镜头之间切换。我不认为那种被动观看的方式会消失。但能让观众在一个场景中驻足，选择何时身处人群之中，何时退后一步、何时飞越其上（毕竟这是虚拟在场），那是一个令人兴奋的机遇。
从技术角度来看，在实时同步沉浸式音频、XR 视觉效果和低延迟互动方面，最大的挑战有哪些？
Briege Whitehead，Surround Sync 联合创始人：
在 Surround Sync，我们自 2018 年起就一直在开发和运营大规模共享沉浸式体验，我们的很多工作正是专注于解决这些挑战。在支持数百名并发用户的同时，保持 XR 视觉效果与空间音频之间帧级精确的同步，需要稳健的时序、网络和播放系统，这些系统必须在真实环境中持续稳定运行。
最大的挑战之一是规模化可靠性。在受控环境中同步少数设备是一回事，但创建一个能在数百个无线设备上实现近乎零延迟的系统，同时与影院环绕声、屏幕内容和其他场馆基础设施保持完美同步则完全是另一回事。
达到这种一致性水平需要多年的开发、测试和改进，最终形成了一个获得专利的平台，该平台已在多个场馆运营数年，覆盖数千场观众体验。
在这一过程中，我们必须解决硬件性能、电池续航、散热管理、网络稳定性、多系统运行和观众舒适度等方面的挑战。同样重要的是确保技术能被场馆工作人员可靠操作，而不需要专业的技术知识。要让沉浸式体验实现商业化规模扩展，它的运行需要像任何其他场馆设施一样简单可靠，复杂性全部隐藏在幕后。
BBC 和 ITV 等广播机构在帮助沉浸式体验从小众技术演示走向主流观众体验方面扮演什么角色？
Tim Guilder，ITV Studio 制作技术负责人：
这是一个探索将现场体验提升到新水平的机会，同时也回答了我们整个行业长期以来一直想要解决的无障碍问题！
许多观众目前根本未被照顾到。也许他们无法亲临现场音乐活动、体育场或电视演播室来体验成为观众的一部分。我们应该开始利用这项新技术和家庭中的高速连接，将演播厅和那种沉浸式体验直接送到他们面前。
Nick Kennedy，BBC 研发工程师：
我们有根本性的责任为每一位观众带来尽可能好的体验，无论他们的情况如何，并帮助英国创意经济蓬勃发展。因此，这不仅仅是带来一次性的体验，而是要确定最低必要规格，使沉浸式体验能成为常规的、可重复的活动。
高品质麦克风采集在实现可信的沉浸式和空间直播音乐节体验中扮演什么角色？
Chad Wiggins，Shure 创新副总裁：
高品质麦克风采集扮演着至关重要的角色，因为没有它，就无法忠实还原原始声学环境。利用能复制人类听觉的高品质麦克风采集，你就能重现真实的音乐节体验。
忠实的沉浸式空间音频体验依赖于对场景中声源的准确定位。视频元素会在正确的位置，但如果音频采集质量差，音频在回放时可能不会显得来自同一位置。
IFeL 项目依赖干净、低延迟的音频来支持空间和视点感知混音。沉浸式音频对现场音乐节的采集和麦克风设计提出了哪些具体挑战？Shure 的贡献如何帮助确保沉浸式音频在物理场馆体验和远程 XR 体验中保持一致和可靠？
Chad Wiggins，Shure 创新副总裁：
挑战包括组合多个麦克风并保持相位一致性。这在任何格式中都是挑战，但在定位线索至关重要的格式中尤为如此。Shure 的贡献通过先进的阵列技术解决了这个问题，让麦克风的性能在信号处理之前就承担大部分关键工作，以获得最佳效果。
音乐节和场馆越来越成为下一代观众互动技术的试验场。为什么现场音乐环境特别适合这一领域的实验？
Muki Kulhan，IBC 加速器媒体创新计划创新负责人：
仔细想想，音乐节和场馆本来就是为观众而设的试验场——大概从第一个在树林里卖艺的原始人就开始了。无论是首次尝试一首新歌、试用新乐器还是新设备，它都是艺术家寻找新方式来加强与粉丝连接的即时试验台。反过来，音乐节、场馆和活动也能不断学习如何改进幕后和台下的运作。
你认为年轻观众现在是否比传统广播所能提供的更期待沉浸式和参与式体验？
Muki Kulhan，IBC 加速器媒体创新计划创新负责人：
是的，比以往任何时候都更期待。大多数 15 岁以下的人都是在”沉浸式原住民”的环境中成长起来的，通常在三度沉浸式环境、互动世界、通过六自由度（6DoF）的沉浸式音频、空间化体验和 LBE（基于位置的体验）方面都有不少经验。他们中许多人期待并欣赏沉浸式和互动式体验的力量。
行业是否终于到达了沉浸式虚拟音乐节体验可以成为商业可持续（而非仅仅是实验性展示）的阶段？
Briege Whitehead，Surround Sync 联合创始人：
我们相信行业已经到达了那个点，尽管许多人可能还没有意识到。通过我们的制作公司 White Spark Pictures 和 Surround Sync，我们已经商业化地制作和展示基于位置的沉浸式体验好几年了。
我们的 VR 纪录片已在博物馆、文化机构以及最近的传统影院吸引了数十万张售票入场，创造了数百万美元的票房收入。
《南极体验》（The Antarctica Experience）和《大金伯利荒野》（The Great Kimberley Wilderness）等作品证明，当内容和交付模式合适时，观众愿意为高端沉浸式体验付费。事实上，如果以传统院线票房来衡量，这两部作品都位列澳大利亚票房最高的十部纪录片之列。
讨论的焦点正越来越多地从沉浸式体验是否具有商业可行性，转向它如何扩展到新的领域。像 IFeL 这样的项目代表了令人兴奋的下一步，因为它们将在基于位置的娱乐中已被证明成功的同样原则，应用到了现场音乐和活动体验中。
除了音乐节，这里开发的工作流程和技术最终是否会影响体育、戏剧、企业活动或主流电视广播？
Briege Whitehead，Surround Sync 联合创始人：
当然可以。虽然音乐节为测试这些实时技术提供了令人兴奋的环境，但底层的挑战和机遇几乎在每一种形式的现场娱乐和基于活动的内容中都是共通的。
无论是音乐节、体育赛事、戏剧制作、现场演讲活动还是电视广播，核心问题越来越趋于一致：如何将在场感延伸到物理场馆之外，让观众无论身处何地都能以有意义的方式参与？
该项目强调”共享在场感”而非被动观看。你认为现场娱乐的未来是否会越来越侧重参与而非观看？
Chad Wiggins，Shure 创新副总裁：
现场娱乐一直是一种共享体验。这一概念通过将体验带给无法亲临现场的人来改善无障碍性，我们认为这是未来的积极趋势，并可能重新定义参与现场活动的方式。
如果 IFeL 这样的项目成功，它们将如何重塑现场音乐节背后的商业和创意模式？
Nick Kennedy，BBC 研发工程师：
在 BBC 研发部门，体积捕捉和高斯泼溅（Gaussian Splatting）等技术让我们能够将虚拟摄像机放置在它们物理上根本不可能到达的位置。就我个人而言，我想看到我们在超越仅仅复制现实、真正延伸现实方面能走多远。音乐节一直兼具社交性和奇观性。
当我们从仅仅复制现实，走向开发全新的共享现场体验，将来自世界各地的人们聚集到我们从未体验过的、物理与虚拟交融的混合环境中，这将会发生什么，这将无比令人兴奋。
IFeL：沉浸式音乐节直播——大规模远程在场（Immersive Festival Live – Remote Presence at Scale），连同一系列其他探索沉浸式技术和媒体的项目，将于 2026 年 9 月 11 日至 14 日在阿姆斯特丹的 IBC 2026 上进行现场演示。
原文：https://headlinerhub.com/bbc-itv-shure-shaping-future-immersive-live-music-streaming.html
本文来自作者投稿，版权归原作者所有。如需转载，请注明出处：https://www.nxrte.com/zixun/70735.html
