在观看电影或电视时,相信很多人都遇到过这样的情况:看到的画面与听到的声音不同步,严重影响了用户的观看体验,让人感觉十分不爽。本篇文章就来谈谈音视频同步的那些事。
1.音视频同步的定义和要求
所谓音视频同步是指多种数据流类型的集成,这些数据流包括连续媒体流(视频、音频和动画) 及离散媒体流(文本、数据、图形和图像等)在这些媒体流的信息单元之间存在着某种时间关系,当多媒体系统存储、发送和播映数据时必须维持这种关系。一般地,维持一个或多个媒体流的时间顺序的过程就称为多媒体同步。
在多媒体系统中,通常从多媒体的不同侧面来表达媒体之间存在的相互依存的关系。下面分别从三个不同的角度对媒体同步进行分类,如图1所示。
图1 媒体同步进行分类
2.音视频同步的影响因素
在分布式多媒体系统中,信源产生的多媒体数据需要经过一段距离的传输才能到达信宿。在传输过程中,由于受到某些因素的影响,多媒体数据的时域约束关系可能被破坏,从而导致多媒体数据不能正确地播放。我们这里列出影响音视频同步的主要因素,如图2所示。
图2 音视频同步的主要影响因素
3.音视频同步的技术
时延存在于多媒体信息的获取、存储、转发、传输和播映等一系列过程之中,一个音视频同步控制也应该贯穿整个通信过程。在通信过程的各个阶段的同步措施都是为最终在信宿端同步的实现服务。
由于传输过程中存在着各种破坏同步的因素,因此涉及到的通信同步机制比较复杂。以下所论述的同步控制机制都是基于特定的应用环境而提出的。 下面介绍几种音视频同步技术及其优缺点,如下图3所示。
图3
4.总结
与传统媒体相比,多媒体应用往往需要更宽的带宽,而且几乎所有的多媒体应用都具有实时性。这些因素使得诸如时延抖动,网络阻塞,包丢失等都会引起媒体内或媒体间失步,严重影响着多媒体的同步播放质量。多媒体同步涉及数据的生成、传输及播映等多个方面,可以在信源端、网络或信宿端进行控制,同时亦可以将上述三个方面的控制结合起来以实现媒体的同步。
在观看电影或电视时,相信很多人都遇到过这样的情况:看到的画面与听到的声音不同步,严重影响了用户的观看体验,让人感觉十分不爽。本篇文章就来谈谈音视频同步的那些事。
1.音视频同步的定义和要求
所谓音视频同步是指多种数据流类型的集成,这些数据流包括连续媒体流(视频、音频和动画) 及离散媒体流(文本、数据、图形和图像等)在这些媒体流的信息单元之间存在着某种时间关系,当多媒体系统存储、发送和播映数据时必须维持这种关系。一般地,维持一个或多个媒体流的时间顺序的过程就称为多媒体同步。
在多媒体系统中,通常从多媒体的不同侧面来表达媒体之间存在的相互依存的关系。下面分别从三个不同的角度对媒体同步进行分类,如图1所示。
图1 媒体同步进行分类
2.音视频同步的影响因素
在分布式多媒体系统中,信源产生的多媒体数据需要经过一段距离的传输才能到达信宿。在传输过程中,由于受到某些因素的影响,多媒体数据的时域约束关系可能被破坏,从而导致多媒体数据不能正确地播放。我们这里列出影响音视频同步的主要因素,如图2所示。
图2 音视频同步的主要影响因素
3.音视频同步的技术
时延存在于多媒体信息的获取、存储、转发、传输和播映等一系列过程之中,一个音视频同步控制也应该贯穿整个通信过程。在通信过程的各个阶段的同步措施都是为最终在信宿端同步的实现服务。
由于传输过程中存在着各种破坏同步的因素,因此涉及到的通信同步机制比较复杂。以下所论述的同步控制机制都是基于特定的应用环境而提出的。 下面介绍几种音视频同步技术及其优缺点,如下图3所示。
图3
4.总结
与传统媒体相比,多媒体应用往往需要更宽的带宽,而且几乎所有的多媒体应用都具有实时性。这些因素使得诸如时延抖动,网络阻塞,包丢失等都会引起媒体内或媒体间失步,严重影响着多媒体的同步播放质量。多媒体同步涉及数据的生成、传输及播映等多个方面,可以在信源端、网络或信宿端进行控制,同时亦可以将上述三个方面的控制结合起来以实现媒体的同步。
举报