WebRTC video pipeline

本文主要从网上收集,贴这里是为自己查看方便。
原文:https://blog.piasy.com/2018/05/24/WebRTC-Video-Native-Journey/index.html

 

 

通过这次的源码分析,我们可以看到 WebRTC 是如何设计 VCM (Video Coding Module) 这个跨平台视频处理模块的结构的。

首先这个模块包括采集、编码、jitter buffer、解码、渲染等功能,还有它们的线程、队列管理,其中采集、(硬件)编解码、渲染都是平台相关的,其他模块以及对平台相关模块的调用和管理,都是平台无关的。

那我们就通过接口 + 回调的形式,将平台相关的模块抽离出去,对它们的操作,VCM 就调用接口,而它们需要把数据交给 VCM,或者需要调用 VCM 的功能时,就通过回调的形式把控制权还给 VCM。

至于怎么把它们关联起来,就需要在构造 VCM 的时候,把接口实现注入进去了,或者利用工厂模式,把 factory 注入进去,VCM 调用 factory 来创建接口的平台相关实现,显然 WebRTC 是用了工厂模式。

 

1. capture-encoder call stack

WebRTC video pipeline

 

 

2. Sender call stack

WebRTC video pipeline

 

 

3. Decoder call stack 

WebRTC video pipeline

 

4. Render call stack:

WebRTC video pipeline

 

上一篇:Azure Terraform(九)利用 Azure DevOps Pipeline 的审批,控制流程发布


下一篇:自动化集成:Pipeline整合Docker+K8S