技术文章
-
使用 WebRTC 进行在线教育的好处及应用场景
WebRTC(Web Real-Time Communication)是一项重塑在线教育的突破性技术。凭借 Web 浏览器中的实时通信功能,它无需额外下载或插件即可实现无缝视频通话…
-
WebRTC 中的 ICE 和 SDP
随着远程工作、视频会议和实时流媒体的兴起,对实时通信技术的需求呈指数级增长。WebRTC,即 Web 实时通信,是一种非常强大的技术,可促进 Internet 上设备之间的实时通信…
-
GLIGEN: 开放集基于定位语言的图像生成 | CVPR2023
大规模的文本到图像扩散模型已经取得了惊人的进步。然而,现状是只使用文本输入作为条件,这可能会阻碍可控性。GLIGEN,是一种基于定位语言的图像生成,在现有的预训练文本到图像扩散模型…
-
微软AR/MR专利分享通过手势+眼睛注视确定用户交互意图
对于AR,确定用户意图是一个问题。在名为“Multi-factor intention determination for augmented reality (ar) envir…
-
百度视频质量评测的实践之路
视频编解码技术日新月异,新的编解码技术赋予视频业务新的应用场景和新的用户视听体验。同时,视频作为带宽消耗大户,如何在视听体验和视频带宽之间取得最优的平衡是一个永恒的话题。视频质量评…
-
XR沉浸式虚拟演播室的技术分析
本文介绍了辽宁广播电视台根据自身需要设计的XR沉浸式虚拟演播室,该演播室依据XR虚拟技术的工作原理进行系统设备搭建,利用多维LED屏幕和虚拟扩展画面相结合的技术制作方式,为节目内容…
-
Transformer技术原理综述
2022年12月,OpenAI的大型语言生成模型ChatGPT刷爆网络,它能胜任高情商对话、生成代码、构思剧本和小说等多个场景,将人机对话推向新的高度,让网友们不禁怀疑ChatGP…
-
SmartBrush:基于扩散模型的文本和形状引导目标补全 | CVPR2023
通用的图像补全旨在通过借用周围的信息来填充损坏的图像,这几乎不会产生新颖的内容。相比之下,多模态的图像补全为需要填补的内容提供了更灵活和有用的控制,例如,文本提示可以用来描述具有更…
-
基于特征对齐和高斯表征的视觉有向目标检测 | 杨学,严骏驰
研究意义目标检测作为计算机视觉的基本任务之一,是实例分割、目标跟踪、行人再识别等视觉任务的基础,近二十年得到了广泛的研究和快速的发展。然而通用目标检测常常以水平边界框作为主要的目标…
-
6种必知的直播流媒体协议:HLS,RTMP,SRT,MSS,MPEG-DASH和WebRTC
直播流媒体是一个持续增长的现象。事实上,在这项研究中,有80%的人表示,他们宁愿观看直播,也不愿阅读一篇博客文章。此外,与标准视频相比,通过直播流播放的视频收到的观看时间多了27%…
-
实战开发一个GPT虚拟直播的Demo并推流到抖音平台
本文结合元宇宙和ChatGPT的优势,实战开发一个GPT虚拟直播的Demo并推流到抖音平台。 ChatGPT和元宇宙都是当前数字化领域中非常热门的技术和应用。结合两者的优势和特点,…
-
什么是WebRTC P2P mesh 以及为什么它不能扩展?
每隔一段时间就会有人提出用 WebRTC 广播或进行大规模视频会话的想法,而不使用媒体服务器。只是使用纯 WebRTC 的 P2P 网状技术。 虽然作为大学的研究课题很有趣,但我不…
-
从视频中获取帧图片的方法
数据在网络上是以很小的称为帧(Frame)的单位传输的,帧由几部分组成,不同的部分执行不同的功能。帧通过特定的称为网络驱动程序的软件进行成型,然后通过网卡发送到网线上,通过网线到达…
-
音频格式PCM介绍
PCM指的是脉冲编码调制(Pulse Code Modulation),是一种数字信号处理技术,将由波形表示的模拟音频信号转换为由1和0表示的数字音频信号。这个过程涉及对模拟信号进…
-
不同WebRTC应用中的信令回顾
这篇文章对各种流行的WebRTC平台中的信令通道实现进行了快速回顾。它考察了信道使用的协议,消息如何被序列化,以及应用程序是否使用会话描述协议(SDP)作为网络上的不透明字符串,或…
-
uniapp音视频通话质量监测实现(uniapp音视频开发系列6)
本文分享即构 uniapp实现音视频SDK 实现通话质量的功能。在通话或直播的过程中,用户可通过注册相关的回调以获得通话相关的信息,包括推流和拉流的质量报告、接收到音视频首帧的回调…
-
专家说:矿山数智化提速正当时,如何进一步提升语音通信能力?
5G技术的迅速发展,为矿山行业注入了强大的智慧力量。语音通信是矿山领域中一个重要的应用场景。本期移动Labs邀请了中国移动研究院-网络与IT技术研究所高级研究员王磊,与大家分享矿山…
-
Webrtc中如何展示窗口内容,同时不包含window title
Webrtc内置2种视频源捕捉器,屏幕的窗体的。它的窗体模式是带着微软视窗系统所有的window标准的标题栏的,也就是windows title。 那么怎么获取纯净的窗口内容,不要…
-
什么是WHEP?WebRTC流媒体介绍第2部分
在文章 什么是WHIP?中,我们讨论了 WebRTC 和为帮助我们使用它摄取数据而开发的新标准,称为 WHIP。但是,对于摄取的数据,可能需要在某个时候传出或分发相同的数…
-
什么是WHIP?WebRTC流媒体介绍第1部分
当考虑为你的实时流媒体平台使用哪种工具时,WebRTC是被带到前台的热门概念之一。虽然WebRTC自2011年以来一直存在,并在许多场景中得到成功应用,但将WebRTC优化为实时生…