一种多线程的音视频同步控制方法及系统.docVIP

一种多线程的 音视频同步控制方法及系统 陈勇 1，王林强 1，曹玉保 2 （1. 南京龙渊微电子科技有限公司，江苏 南京，211106； 2. 河海大学研究生院，江苏 南京，211100） 摘要：为实现音视频同步播放，本文提供了一种多线程的音视频同步控制方法。所述方法采用操作系统信 号量、条件变量、系统层定义的节目参考时钟和显示时间戳，从而使得音视频在相同的本地系统时钟的参 考下按照 PTS 时刻严格输出。实例显示能够实现音视频同步。 关键字：多线程；音视频；同步控制 中图分类号: TP30 文献标识码: A A method and system of multithreaded audio and video synchronization control CHEN Yong1，WANG Lin-qiang1，CAO Yu-bao2 （1.Nanjing LongYuan microelectronics technology Co. LTD，Nanjing 211106，China； 2. Hohai university，Nanjing 211100，China） Abstract: In order to realize the synchronous play audio, this paper provides a multithreaded audio synchronization control method. The method has the operating system signal, and the condition variables, system of the definition of the program of clocks and display time stamp reference, thus make the audio and video in the same local system clock under the reference moment strictly in accordance with the PTS output. Instances can realize audio synchronization. Key words：multithreaded；audio and video；synchronization control 引言 码结构，该结构采用时间和空间的预测、变换、量化 和熵编码方法，将视频帧编码为不同的帧类型：帧内 预测帧（I 帧）、帧间预测帧（P 帧）和双向预测帧 （B 帧），这必将导致视频解码速度因视频内容而有 1 目前流行的视频编解码标准，例如 MPEG- 1、 MPEG- 2、MPEG- 4、H.26x 等都是采用传统的混合编 China lnte gra te d Circ ult 所不同，而视频的播放帧率是固定的，从而导致了视 频解码速度与显示速度不匹配等问题，而且音频和 视频是分开编码和传输，而在播放时要求同步输出， 如果不采用比较好的控制方法，很容易导致音视频 输出不同步的现象[1]。 解决这个问题的方法，现有技术一般是采用较 大的缓冲区来缓冲编码数据和编码后的图像和音频 帧[2]。由于图像内容的不确定性又给缓冲区大小的 确定带来了困难，缓冲区太小则数据溢出，缓冲区太 大又造成内存空间的浪费。 为了解决现有技术所存在的以上问题，本发明 的目的在于提供了一种多线程的音视频同步控制方 法，所述方法采用操作系统信号量、条件变量、系统 层定义的节目参考时钟和显示时间戳，从而使得音 视频在同一的本地系统时钟的参考下按照 PTS 时 刻严格输出，从而实现了音视频同步播放。 挂起等待。 对于传输流，本步骤所述的音频基本流和视频 基本流是通过 PID 值（进程标识符）区分的，首先 解析 PID 值为 0x00 的数据包，从该数据包中的节目 关联表 PAT 获得各个节目的节目映射表 PMT 的 PID 值。解码某个节目则解析该节目对应的节目映 射表，从而获得该节目中音频基本流的 PID 值以及 视频基本流的 PID 值，然后接收相应 PID 值的数据 包 ， 将 数 据 重 组 成 PES （Packetized Elementary Streams，带有包头的基本码流）分组后插入基本流 队列。对于节目流，则是通过各个 PES 数据分组中 的 Stream ID（流标识符）标志位区分音频和视频基 本流。 本步骤所述的时间信息是指 PES 分组中的时 间戳 PTS 与节目参考时钟 PCR，将解析得到的 PTS 值保存在相应的队列节点中。解复用线程在将一整 个 PES 分组的基本流插入基本流队列后，对信号量 进行 P 操