首页 > 代码库 > 解复用实现原理

解复用实现原理

解复用是多媒体开发中核心的功能。

解复用功能是从音视频信号源中分流出不同的音频和视频流;另外解复用一般属于一种主动操作,即从音视频信号源中取出。

数据流结构为Source->Demux->Stream

主要实现模式有:

1)直接模式:直接从信号源获取相应的音频或者视频数据。这种方式适合顺序读取和拥有帧位置元数据等信号源。

使用这种模式,实际是从Demux中直接获取数据,当然也可以从Stream,然后间接调用Demux获取。

2)索引模式:直接模式中如果不包含帧位置元数据的信息(或者收录的实时流文件),就不能进行seek。

为解决该问题,可在文件解析过程中,对音频或者视频流分别建立索引。使用这种模式,Demux在解析完数据后的功能弱化,获取数据实际是Source->Stream。

3)缓存模式:解复用音视频数据,分别进行缓存,然后通过相应数据流接口获取数据。网络流的解复用使用该种模式。

使用这种模式,Source->Demux->Stream。