基于PNX1300的音频和音视频同步的实现

论文摘要

本文主要介绍了一种基于Nexperia PNX1300 多媒体处理芯片的G .722 音频编解码系统和MPEG-4 的音视频同步的实现方案。系统硬件部分采用以PNX1300多媒体处理芯片为核心DVE-2嵌入式多媒体开发板。软件部分采用C 语言进行程序设计。首先设计了一套运行于PNX1300 之上的实时语音信号采集-编解码-播放的可行方案。讨论了G.722 语音编解码器在PNX1300 上实时实现的关键技术及在具体实现过程中的问题,并提出了相应的解决方法。然后讨论了一个基于PNX1300 的音视频信号编码系统,并论述了该系统中G.722 音频编码和MPEG-4 视频编码的同步实现方案。并根据PNX1300 芯片的软件结构体系做出改进,音视频同步效果良好。结合同组同学的视频部分和网络传输部分,构建了一个远程多媒体监控系统。目前,该编码器的全部设计已经完成,采用该编码器设计的远程视频监控系统也已经投入实际应用。

论文目录

• 第一章 引言
• 1.1 MPEG-4 标准简介
• 1.2 MPEG-4 标准的应用领域
• 1.3 MPGE-4 编码研究现状
• 1.4 论文的选题和结构
• 第二章 MPEG-4 标准的系统流
• 2.1.M PEG-4 标准系统流（SYSTEM）
• 2.1.1 系统体系结构
• 2.1.1.1 系统终端模型
• 2.1.1.2 传输层定义
• 2.1.1.3 同步层定义
• 2.1.1.4 压缩层定义
• 2.1.2 系统解码器模型
• 2.1.2.1 系统解码器模型的基本概念
• 2.1.2.2 定时模型规范
• 2.1.2.3 缓冲区模型规范
• 2.2 本章小结
• 第三章NEXPERIA PNX1300 开发环境
• 3.1 PNX1300 DSP 芯片介绍
• 3.1.1 PNX1300 芯片特点
• 3.1.2 PNX1300 芯片内部各模块的简介
• 3.2 PSOS 嵌入式实时操作系统
• 3.2.1 什么是pSOS?
• 3.2.2 pSOS 系统的体系结构
• 3.2.3 pSOS+内核
• 3.3 Nexperia 软件体系结构
• 3.3.1 开发环境
• 3.3.2 库
• 3.3.3 板支撑包BSP
• 3.4 本章小结
• 第四章 G.722 音频编解码的设计与实现
• 4.1 音频编码标准G.722
• 4.1.1 G.722 SB-ADPCM 编解码算法
• 4.1.2 本系统采用G.722 音频标准的原因
• 4.2 G.722 音频编解码标准在PNX1300 上的实现
• 4.2.1 PNX1300 的音频接口简介
• 4.2.2 G.722 音频编解码器的实现
• 4.2.2.1 硬件设计
• 4.2.2.2 软件设计
• 4.2.2.3 结论
• 4.3 本章小结
• 第五章 MPEG-4 音视频的同步方案的设计与实现
• 5.1 系统介绍
• 5.1.1 系统软硬件设计
• 5.2 MPEG-4 基本码流同步方案
• 5.2.1 MPEG-4 基本流
• 5.2.2 基本码流的同步
• 5.2.3 基本码流的多路合成
• 5.2.4 MPEG-4 的文件格式
• 5.3 系统模块设计与实现
• 5.3.1 DVE-2 开发板介绍
• 5.3.2 视频采集和编码模块
• 5.3.3 音频采集和编码模块
• 5.3.4 同步层打包模块
• 5.3.4.1 视频流打包
• 5.3.4.2 音频流打包
• 5.4 系统中MPEG-4 音视频同步的实现
• 5.4.1 音视频同步的概念
• 5.4.2 MPEG-4 的音视频同步的实现方案
• 5.4.3 基于PNX1300 的音视频同步
• 5.4.3.1 Nexperia 的引导程序的设计
• 5.4.3.2 程序的编译、连接、调试和优化方式
• 5.4.3.3 PNX1300 的音频视频的时钟系统
• 5.4.3.4 视频量化器模型和音频量化器模型
• 5.4.3.5 PNX1300 上的MPEG-4 时钟模型
• 5.4.3.6 时钟参考PCR 的处理方法
• 5.4.5 验证和结论
• 5.5 基于网络的远程监控系统
• 5.6 本章小节
• 第六章 结论
• 致谢
• 参考文献