首页> 正文

帧速率上变换算法研究

2020-12-14阅读(788)

帧速率上变换算法研究

论文摘要

帧速率上变换作为一种视频后处理技术,通过在原有视频帧中插入中间帧的方式,将低帧率视频变换成高帧率视频。在近些年兴起的高清数字电视和高端多媒体系统中,提高帧率能够获得更好的视觉质量,使得观看者可以观赏更加自然流畅的运动场景;而在移动终端低码率视频应用中,提高帧率可以恢复由于带宽受限而在编码端被跳过的视频帧,有效减少视觉上的停滞感和跳跃感。帧速率上变换算法主要包含两个过程:运动估计和基于运动估计的运动补偿。现有的帧速率上变换算法在运动估计部分大多数都选择块匹配方法,因为该方法运算简单、便于硬件实现。然而块匹配方法总是选择残差最小的运动矢量,因此在图像平坦区域和纹理区域容易得到错误结果。另外,块匹配假设块内所有像素有相同运动,当物体边缘与块边界不重合时,一个块内可能包含具有不同运动的多个物体,从而导致边缘重影。与块匹配对应的运动补偿方法分为单向补偿和双向补偿。单向补偿比双向补偿更加准确,但是会面临重叠和空洞问题,不恰当的内插方法在重叠位置会产生块效应,在空洞位置则会出现插值模糊。针对块匹配运动估计中的问题,本文提出了一种基于运动分割及边缘细化的运动估计方法。该方法首先采用加入运动平滑约束的匹配准则,有效减少平坦区域和纹理区域的错误估计;然后对矢量场进行运动分割,寻找矢量场中包含运动边缘的区域,对边缘区域采用可变尺寸块估计以提高矢量场精度;最后对非边缘区域进行矢量块分解和平滑滤波。实验结果表明,该方法能够提高运动边缘区域矢量场的平滑性,减少传统方法导致的块效应和边缘重影。针对单向运动补偿中的重叠和空洞问题,本文提出了一种基于闭塞区域检测及边缘保持的运动补偿方法。该方法首先分析前向/后向矢量场,根据几何对称性和残差分布,检测闭塞区域的位置;然后利用加权扩展块运动补偿解决重叠问题,同时对闭塞区域作特殊处理;最后引入图像超分辨率算法(Super Resolution)中的边缘方向性插值思想填充空洞区域。实验结果表明,该方法能够较好的解决重叠和空洞问题,消除物体轮廓重影,并能良好地保持边缘。本文最后研究了所提出的算法在2D/3D视频中的应用。上述运动估计与运动补偿方法直接结合即构成本文应用于2D视频的帧速率上变换算法,通过大量对比实验证实了本文算法得到的内插帧比传统算法具有更高的图像质量。之后本文对基于深度图像的3D视频展开研究,利用深度信息约束改进了上述的2D视频算法,提出了一种低复杂度的3D视频帧速率上变换算法。在最终的单视点与多视点合成实验中证实,与不考虑深度信息的传统算法相比,本文算法得到的内插帧具有更好的图像质量。

论文目录

  • 摘要
  • ABSTRACT
  • 第1章 绪论
  • 1.1 研究背景
  • 1.2 研究内容及创新点
  • 1.3 论文章节安排
  • 第2章 帧速率上变换算法概述
  • 2.1 引言
  • 2.2 非运动补偿算法
  • 2.3 运动补偿算法
  • 2.3.1 帧速率上变换中的运动估计
  • 2.3.2 帧速率上变换中的运动补偿
  • 2.4 帧速率上变换算法的性能评估
  • 2.4.1 主观质量评价标准
  • 2.4.2 客观质量评价标准
  • 2.5 本章小结
  • 第3章 基于运动分割及边缘细化的运动估计
  • 3.1 现有的FRUC 运动估计算法
  • 3.2 本文提出的算法框架
  • 3.3 多分辨率分层块匹配
  • 3.3.1 分层块匹配估计方法
  • 3.3.2 自适应滤波区域匹配
  • 3.4 基于运动分割的矢量场细化与平滑
  • 3.4.1 运动矢量场分割
  • 3.4.2 运动边缘细化
  • 3.4.3 矢量场平滑与分解
  • 3.5 实验结果
  • 3.6 本章小结
  • 第4章 基于闭塞区域检测及边缘保持的运动补偿
  • 4.1 现有的FRUC 运动补偿算法
  • 4.1.1 单向运动轨迹
  • 4.1.2 双向运动矢量
  • 4.2 本文算法框架
  • 4.3 基于闭塞区域检测的自适应扩展块运动补偿
  • 4.3.1 闭塞区域检测
  • 4.3.2 加权扩展块运动补偿
  • 4.3.3 预插帧自适应合并
  • 4.4 基于边缘保持的空洞内插算法
  • 4.4.1 超分辨率算法中的边缘方向插值
  • 4.4.2 边缘保持的空洞内插
  • 4.5 实验结果
  • 4.6 本章小结
  • 第5章 帧速率上变换在2D/3D 视频系统中的应用
  • 5.1 帧速率上变换在2D 视频系统中的应用
  • 5.2 2D-FRUC 实验结果
  • 5.3 三维视频系统综述
  • 5.4 帧速率上变换在3D 视频系统中的应用
  • 5.4.1 深度信息约束的运动估计
  • 5.4.2 k-means 分割
  • 5.4.3 矢量场后处理
  • 5.4.4 基于边缘保持的运动补偿
  • 5.5 3D-FRUC 实验结果
  • 第6章 总结与展望
  • 6.1 本文工作总结
  • 6.2 后续工作展望
  • 参考文献
  • 英文缩略语对照表
  • 致谢
  • 攻读硕士学位期间已发表或录用的论文
  • 攻读硕士学位期间参与的科研项目
  • 附件

    • 相关论文文献

    • [1].基于二维S变换算法的图像去噪研究[J]. 信息技术 2017(02)
    • [2].地图代数距离变换算法的改进及实现[J]. 甘肃科学学报 2016(01)
    • [3].实现稳定双向认知映射的逆向云变换算法[J]. 模式识别与人工智能 2013(07)
    • [4].多步逆向云变换算法在图像分割中的应用[J]. 电脑知识与技术 2015(12)
    • [5].数字地图点状要素合并变换算法研究[J]. 系统仿真学报 2009(05)
    • [6].基于派克变换算法的空冷电厂厂用电谐波分析[J]. 电网与清洁能源 2009(05)
    • [7].电能质量扰动分析中广义S变换算法的改进与实现[J]. 电力系统及其自动化学报 2017(03)
    • [8].基于多评价因素的面状要素合并变换算法[J]. 计算机辅助设计与图形学学报 2009(02)
    • [9].基于二进制采样快速S变换算法的电能计量方法研究[J]. 电测与仪表 2016(02)
    • [10].取邻抽取任意倍数采样率变换算法[J]. 数据采集与处理 2012(02)
    • [11].线性调频信号检测的快速调频变换算法[J]. 声学技术 2009(02)
    • [12].尺度不变特征变换算法在图像配准中的应用[J]. 弹箭与制导学报 2008(02)
    • [13].螺槽区域上偏微分方程模型的几何变换算法[J]. 北京化工大学学报(自然科学版) 2016(05)
    • [14].马尔可夫密码理论在实际密钥变换算法下的适用性[J]. 密码学报 2014(01)
    • [15].K-L变换算法在工程中的实践[J]. 福建电脑 2010(05)
    • [16].一种基于位置和景物平面的视角变换算法研究[J]. 信息工程大学学报 2016(06)
    • [17].基于Hough变换检测直线的研究[J]. 福建电脑 2009(04)
    • [18].基于实例分割和自适应透视变换算法的多车道线检测[J]. 东南大学学报(自然科学版) 2020(04)
    • [19].基于尺度不变特征变换算法的植物自动识别系统[J]. 计算机应用 2016(S2)
    • [20].Java安全包的MD5防穷举变换算法的研究与实现[J]. 电脑编程技巧与维护 2009(02)
    • [21].AVS-M整数变换算法分析及实现[J]. 湖南工程学院学报(自然科学版) 2008(02)
    • [22].一种用于PCB组装的元器件定位系统[J]. 电子与封装 2020(08)
    • [23].AVS变换算法在C64x+DSP上的实现[J]. 微计算机信息 2009(02)
    • [24].一种用于虚拟内窥镜的改进边界距离变换算法研究[J]. 系统仿真学报 2014(06)
    • [25].基于改进Hilbert-Huang变换算法的电气化铁路谐波检测[J]. 上海交通大学学报 2014(09)
    • [26].基于椭圆拟合的改进Hough变换算法在眼控系统中的应用研究[J]. 广东技术师范大学学报 2020(03)
    • [27].一种改进的自适应分段线性变换算法[J]. 激光与红外 2020(08)
    • [28].基于改进离散S变换算法的常规通信信号分选识别模型[J]. 舰船电子工程 2013(04)
    • [29].模糊Hough变换算法在城市道路提取中的应用[J]. 测绘信息与工程 2012(03)
    • [30].AGV视觉导向Hough变换算法的FPGA硬件实现[J]. 工业控制计算机 2010(06)

    标签：;  ;  ;  ;  ;  ;  ;  

    帧速率上变换算法研究
    下载Doc文档

    猜你喜欢

    © 2024 毕速过 版权所有 鄂ICP备12018319号-5