视频技术
-
如何为visionOS准备和提供视频内容 | WWDC2023
本文将介绍使用 HLS(HTTP Live Streaming) 为 visionOS 准备和交付视频内容的方法。我们将深入了解 HLS 媒体交付流程,并探索如何扩展交付管道以支持…
-
Sora: 作为世界模拟器的视频生成模型
OpenAI新提出了一种功能强大的视频生成大模型,采用tansformer结构处理视频图像的时空块,支持不同长度、不同分辨率和不同长宽比的视频生成。其中最大的Sora模型支持长达一…
-
FLATTEN: 针对文本到视频一致性编辑的光流引导注意力机制
文本到视频编辑任务中的一个主要挑战是确保编辑后视频的帧间一致性。最近的研究致力于将文生图扩散模型应用于视频编辑任务,通过将U-Net中的2D空间注意力机制扩张为3D时空注意力机制。…
-
HiNeRV:基于分层编码神经表示的视频压缩 | NeurIPS 2023
本文提出了一种名为 HiNeRV 的神经表示模型用于视频压缩。HiNeRV 将轻量级层与新颖的分层位置编码相结合,采用深度卷积、MLP 和插值层来构建具有高容量的深而宽的网络架构。…
-
Upscale-A-Video: 实时视频超分辨率的时间一致扩散模型
基于文本的扩散模型在生成和编辑方面取得了显著的成功,显示出利用扩散模型先验生成性增强视觉内容的巨大前景。然而,由于对输出保真度和时间一致性的高要求,将扩散模型应用于视频超分辨率仍具…
-
基于网络5.0技术的网络视频会议系统
摘要:网络视频会议系统是目前网络办公和信息沟通的主要工具,已具备多样化的功能,在业务组织上分为公有云部署、私有云部署、非云化部署等形式。针对大规模部署的需要,网络视频会议构建了分层…
-
TransHuman: 基于Transformer的广义体渲染人体表示
在本文中,作者主要研究可泛化的神经渲染任务,该任务从不同人物的多视图视频中训练条件神经辐射场 (NeRF)。为了处理动态人体运动,以往的方法主要采用基于SparseConvNet …
-
视频比特率:如何提高视频质量和流媒体性能
无论是流媒体、广播还是视频会议,视频比特率都是决定视频内容质量的关键因素。比特率是指单位时间内传输的数据量,会影响视频的大小和质量。 本文将探讨视频比特率的概念及其对视频质量的影响…
-
将 HDR 视频引入 Reels 的技术挑战和优化实践
在过去一年中,Facebook 和 Instagram 的视频基础架构团队发现上传到我们应用程序的 HDR 内容数量大幅增加,每天都有数百万 HDR 视频上传。因此,我们一直在努力…
-
TTVSR:用于视频超分辨率的学习轨迹感知 Transformer | CVPR 2022
本文提出了一种新的轨迹感知 Transformer——TTVSR,以实现视频超分辨率的有效视频表示学习。 来源:CVPR 2022论文题目:Learning Trajectory-…
-
低延时视频技术的应用场景和挑战
编者按:无线网络对人们的生活产生了巨大的影响,而5G技术的引入将彻底改变我们与世界互联互通的方式。在5G时代,实现万物互联离不开低延时技术的应用。 LiveVideoStackCo…
-
Dragonfly:以更高的感知质量实现连续 360° 视频播放 | SIGCOMM 2023
在流式传输 360° 视频时,通过将视频在空间上分割为 tile 并仅传输用户的视口,可以减少 5 倍带宽。但正确预测用户的视口非常困难,这就导致由于错误预测用户视口以及网络带宽下…
-
有视频监控了为什么还要配置视频网关
在一些智慧项目中,经常会要求配置视频网关,有时会给我们造成一些困惑,已经有视频监控了,为什么还需要一个视频网关呢?现在在用的视频监控有管理平台,有录像设备,可以随时调看,也可以上墙…
-
VRT : 视频恢复变压器
引言 视频恢复(如视频超分辨率)旨在从低质量帧恢复高质量帧。与单个图像恢复不同,视频恢复通常需要利用多个相邻但通常不对齐的视频帧的时间信息。现有的视频恢复方法主要分为两大类:基于滑…
-
基于质量层 (QBT) 的转码器如何改进视频流并降低 FAST 流媒体成本
FAST 是免费广告支持流媒体(Free Ad-Supported Streaming)的简称,在对价格敏感的观众中越来越受欢迎。快速增长的收视基础和广告收入的不断增长有利于 FA…
-
LiveAE:基于注意力和边缘辅助的实时360°视频流媒体视口预测 | EMS ’23
视口预测在实时360°视频流媒体中扮演着至关重要的角色,它决定了应预先获取哪些高质量的 tile ,从而影响用户体验。 来源:EMS ’23题目:LiveAE: Att…
-
CAVSR:压缩感知视频超分辨率 | CVPR 2023
视频超分辨率(VSR)旨在利用低分辨率帧内的互补时间信息来恢复高分辨率帧序列。然而,目前大多数的 VSR 方法通常针对特定的压缩方式,实验设置与实际应用之间的性能差距很大,不能自适…
-
移动沉浸式视频的协作流媒体和超分辨率适应 | INFOCOM2023
基于图块的流媒体和超分辨率是用于提高沉浸式视频流的带宽效率的两种代表性技术。前者允许通过将视频分割成多个独立可解码的图块来选择性下载用户视口中的内容。后者利用客户端计算,使用先进的…
-
丢包网络多站点并行下载的 CUBIC 拥塞避免机制改进算法 | MMSys’2023
随着在线视频观看的快速增长,用户体验对于视频流媒体服务来说变得至关重要,以吸引用户并增加他们的黏性。多侧并行下载是一种策略,通过同时从多个低成本的数据节点请求视频片段,可以减少延迟…
-
用于无监督视频语义压缩的非语义抑制掩码学习 | ICCV 2023
视频压缩的大多数方法旨在改进重建视频质量,而非特别保留AI任务所需的语义信息,这会降低下游AI任务的完成效果。此外,任务无关的网络将编码系统与下游任务解耦,并且对于数据稀缺情况友好…