技术文章

通过webrtc 视频会议的需求越来越多，很多人反映搭建webrtc 视频会议服务器便遇到很多问题，这篇文字将webrtc 视频会议搭建过程重新梳理一遍，希望对大家能有帮助，通过下…

MP4简介 MP4(MPEG-4 Part 14)是一种常见的多媒体容器格式，它是在“ISO/IEC 14496-14”标准文件中定义的，属于MPEG-4的一部分，是“ISO/IE…

最大化实时视频的体验质量(QoE)是一个长期存在的挑战。传统的视频传输协议以少量确定性规则为代表，难以适应异构、高度动态的现代互联网。新兴的基于学习的算法已经显示出应对这一挑战的潜…

想做一个直播推流而已，为什么还要学习RTMP的协议？我们想回想一下我们推流端的简要流程： 那么在第三步，RTMP包如何封装呢？真的是简单的调用一下API就完事了吗？ 我们现在看一段…

AAC就是高级音频编码(Advanced Audio Coding)，出现于1997年，基于MPEG-2的音频编码技术,目的是取代MP3格式。 2000年，MPEG-4标准出现后，…

H.264是ITU（International Telecommunication Union，国际通信联盟）和MPEG（Motion Picture Experts Group，…

在上一篇文章《音视频开发进阶课程｜第六讲上：色彩和色彩空间》，我们带大家了解了视频、图像、像素和色彩之间的关系，还初步认识了两种常用的色彩空间，分别是大家比较熟悉的 RGB，以及更…

引言 调用系统 VideoToolbox 的 API 实现一个硬编很容易，仔细看看文档、了解 API 的使用实现一个基本功能相信难不倒大家。但实际工作中有许多细节，一不注意就会掉坑…

SurfaceView SurfaceView 是一个可以在子线程中更新 UI 的 View，且不会影响到主线程。 它为自己创建了一个窗口（window），就好像在视图层次（Vie…

OpenSL ES 是可以让你使用C或者C++来实现高性能，低延迟音频API。ES代表Embedded Systems，在嵌入式系统中单独设计。使用OpenSL ES可以省去nat…

本文主要介绍ffmpeg解码音频并且搭配AudioTrack以及OpenSLES播放PCM原始音频数据。 音频解码 对于使用ffmpeg进行音视频的解码过程，我们来回忆一下这张图：…

在《安卓使用SurfaceView绘制ffmpeg解码的视频数据》虽然我们成功地实现了视频的渲染，但是在YUV转换成RGB的时候，我们调用了ffmpeg内部的转换函数，这里面包含大…

在前面的实战中，我们已经通过SurfaceView成功渲染视频了。虽然功能上我们是实现了视频的解码和渲染，但是这里有一个性能方面的问题：就是在解码渲染视频的时候CPU使用率会很高。…

在上一篇文章《ffmpeg如何将一个视频文件解码为yuv文件》中我们已经使用ffmpeg解码视频为yuv数据文件了，那么yuv数据如何显示呢？ 不知道大家是否还记得这张图： 其中一…

随着相机采集越来越多的与滤镜、美颜、特效等前处理流程结合，关注采集预览的性能变得十分重要。采集预览阶段表示打开相机，但是还没开始进行直播推流或者视频录制的阶段，但这时候一般也开始进…

现在我们来关注一下相关研究，相关的感情和触觉刺激在VR中的使用。首先是药物，一项在化疗期间监控患者情绪的研究，其目的是让患者在治疗期间保持一个更加放松的状态，因为接受治疗的患者在现…

解决方案 需要考虑的问题 现在要考虑的第一个问题是触摸和感受的类型。触摸它可能是一种与生俱来的经典触摸，也可能是一种带 有情感的接触，就像你所说的、你所听到的，然后它还可能会是第三…

为了使虚拟现实 (VR) 中的社交互动产生更大的影响，我们需要考虑情绪对我们的人际交流的影响以及我们如何在 VR 中表达它们。本教程将展示关于该主题的研究，我们建议使用基于声音、面…

在学习了将ffmpeg引入到Android Studio工程中，下面我们来尝试使用ffmpeg使用软解码将一个视频文件解码为yuv文件。 通过解码为YUV数据，我们可以给视频添加一…

在前面，我们已经将ffmpeg引入到Android工程中去了，如果你还不知道如何在Android中使用ffmpeg，可以回头看看这篇文章：将ffmpeg引入到Android Stu…