实时音视频
-
扩展大型群组通话的音频和视频
本文整理了YUN ZHANG与BIN LIU在RTC@SCALE 2023关于扩展大型群组通话的报告,视频主要由研究动机、扩展大型群组通话的音频、扩展大型群组通话的视频、未来工作等…
-
音视频学习–关于绿屏的6种检测方案
1. 问题背景 最近和网友聊天时被问道绿屏问题,所以趁着端午节在家和ChatGPT来了一次深度教学,也着实爽了一把。 类似这样的效果: 2. 问题分析 其实绿屏本质就是yuv数据为…
-
如何用机器学习升级RTC
亚马逊 Chime SDK 使开发者能够将通信功能添加到他们的应用程序中。该 SDK 的一个重要功能是能够应用机器学习来增强音频和视频会话。客户还利用机器学习从这些会话中获得智能洞…
-
基于5G网络的视频远程操控应用实践——低延迟视频技术及应用
本次分享将分为三个部分:第一部分介绍低延迟视频所涉及到的关键技术,包括低延迟视频编解码、视频传输、视频处理低延时框架、视频采集和显示;第二部分重点介绍5G环境下低延迟视频对抗弱网提…
-
从零开始构建直播系统 02 – 如何通过WebRTC检测媒体设备
用过音视频会议或在线教育等实时交互软件的人都知道,当摄像头(Camera)或麦克风(Micphone)开启时,首先要进行检测。检测内容包括: 以手机为例,一般包括前置摄像头和后置摄…
-
从零开始搭建直播系统01——如何通过浏览器访问摄像头
许多JavaScript开发者主要认为JavaScript是一种控制网页的工具。可能很难想象将JavaScript用于音频和视频处理。你可能会想,JavaScript或浏览器的性能…
-
如何运用仿真技术保护 RTC 用户体验
本文整理了 Wurzel Parsons-Keir 在 RTC@Scale 2023 关于运用仿真技术保护 RTC 用户体验的介绍,包括了研究原因、系统实现、讨论总结等内容。 来源…
-
SAFR: 自适应帧率的 RTC 系统 | NetAISys 2023
实时通信(RTC)系统在传输过程中往往会丢失一些帧以应对拥塞的情况。虽然帧丢失有助于提高系统的低延迟性能,但它可能会造成丢帧率突然上升和显著的 QoE (Quality of Ex…
-
直播 RTM 推流在抖音的应用与优化
背景 随着互联网技术以及网络基建的快速发展和普及,视频直播已经成为了一种越来越普遍的娱乐和社交方式。无论是个人还是企业,都可以通过视频直播平台进行直播活动,向观众展示自己的生活、工…
-
uniapp实现多人视频聊天(uniapp音视频开发系列9)
本文展示如何使用 ZEGO uniapp实时音视频 SDK 构造多人视频聊天场景,即实现多对多实时音视频互动。用户可在房间内与其余用户进行实时视频通话,互相推拉流。该场景可用于多人…
-
元宇宙中的实时通话
在当今快速发展的技术环境中,虚拟通信已成为新常态。虚拟现实 (VR) 和增强现实 (AR) 的出现彻底改变了用户见面和聚会的方式。随着视频会议 (VC) 软件的广泛采用,远程通信变…
-
元宇宙中的实时音频:REAL-TIME AUDIO AT META SCALE
本文将涵盖在 Meta 旗下的应用程序包括 Messenger、Instagram、Facebook 和 WhatsApp 中为用户提供可靠且高质量的音频体验所需的要素,以应对各种…
-
对话钉钉音视频专家冯津伟:大模型不是万能的
在音视频技术领域,ICASSP 大会是行业的风向标会议,也是语音学界从业者研究下一代技术发展的盛宴。近期,国内外各大企业陆陆续续放出论文入顶会的消息,钉钉蜂鸣鸟音频实验室 2 篇论…
-
音频格式–MP3格式介绍
发展背景MP3 技术的起源在 Hans Musmann 教授的一篇论文中进行了全面描述。在 80 年代末和 1990 年代初由德国弗劳恩霍夫协会的一组工程师在 Karlheinz …
-
什么是通讯API?如何选择通讯API
在快速发展的商业环境中,有效的沟通是成功的核心所在。然而,传统的通讯方法不足以满足不断发展的企业需求。今天,企业需要不间断地访问视频会议、即时通讯功能、双向短信和其他通信功能。这就…
-
音视频问题汇总–如何兼容实时音视频加密?
背景介绍: 最近收到一个网友问题,说他们设备不兼容客户的zrtp SHA 80的加密,他们搞了几天没有完成,问是否可以协助一下。 最初定位是因为不支持SHA80的,那做一下兼容就可…
-
音视频相关协议-hdcp
一、前言: 传输数字内容时,容易受到未经授权的复制和拦截。保护内容已经成为视听内容传输中的重要因素。2003年,英特尔开发了一种加密技术,称为高带宽数字内容保护(High-band…
-
RTC的发展历程及2023年趋势预测
本文分享者 Jonathan Christensen 已经在实时通信(RTC)行业工作了20余年。从在微软担任 RTC 的第一个 GPM 开始,Jonathan Christens…
-
解密实时通话中基于 AI 的一些语音增强技术 | ICASSP 2023
背景介绍 实时音视频通信 RTC 在成为人们生活和工作中不可或缺的基础设施后,其中所涉及的各类技术也在不断演进以应对处理复杂多场景问题,比如音频场景中,如何在多设备、多人、多噪…
-
实时通信 (RTC) 在多元宇宙中的作用
最近很多公司都在谈论他们通常称之为元宇宙的东西。对于什么是元宇宙没有一个明确的定义,但类似这样的东西听起来已经很接近了:”一个高度连接的环境,有很多互动的玩家和复杂的模…