论文摘要
随着信息技术和互联网的飞速发展,人们对信息交流的方式和质量均有了全新的需求。多媒体应用中一个关键的问题就是音频与视频的同步问题,近年来用的比较多的是音频与视频流之间通过时间标签来进行传输。在Internet网络环境下,数据可能会有不同的到达延迟,甚至有可能会丢失。从而,节目参考时钟和显示时间标签在传送中都可能误码、出错。针对当前音频、视频同步传输的发展要求,以四维矩阵及四维矩阵离散余弦变换理论为基础,将视频信号用四维矩阵进行表示,再将其进行4DM-DCT变换,然后再将音频信号嵌入视频,最后采用标量量化熵编码的方法进行压缩,从而实现了音视频信号的完全同步。本文首先在此媒体同步方法的音频信号嵌入部分中找到一种适合的隐藏方法并提出了相应的改进算法,在一定程度上提高了图象的恢复质量,同时提高了隐藏效率。然后将其移植到TMS320DM642 DSP平台上,并充分利用TI公司提供的DSP/BIOS操作系统,RF5基本优化框架等优化技术对这种媒体同步算法进行优化。通过对整个系统模型的进一步优化,实验验证该基于四维矩阵音视频混合熵编码方法的音频嵌入部分可以基本达到实时。同时本文在存储器分配方面,用自己的算法实现内外存储器的自动配置,从而提高了存储空间的使用效率。本文的研究工作对Internet媒体同步传输的应用及其DSP的实现具有一定的参考价值。