基于GPU的内存数据库索引技术研究

基于GPU的内存数据库索引技术研究

论文摘要

由于内存数据库具有比基于磁盘的数据库更高的查询响应速度和并发度,其被广泛应用于银行、证券交易所和在线购物等数据量庞大并且实时性要求高的商业领域。索引能够有效降低数据的搜索空间、提高内存数据库的查询效率,然而当前它却受到性能和效率的挑战。基于图形处理器的通用计算(GPGPU)在多个领域具有重要的研究价值和应用前景,也是当前研究的热点。目前图形处理器(GPU)上索引技术的研究已有一定的相关成果,然而这些研究成果存在着诸如:并行算法未充分利用硬件的资源、并行度不高,算法缺乏可扩展性且不能解决索引数据的更新等问题。因此,本文以如何充分利用GPU的硬件资源、最大限度地提高内存数据库索引的操作性能为主要研究内容,在相关研究的基础上,本文主要做了以下工作:1.对目前内存数据库索引技术的研究成果进行总结归纳,并且对GPU的硬件特点和编程技术做了相关综述。2.提出一种基于GPU T-树索引的并行计算方案,该方案通过分析T-树的节点间的父子关系,在GPU上实现对T-树的最大并行度构建。设计在GPU上T-树索引数据可任意伸缩的动态数组,解决GPU上尚无动态分配显存空间的问题;通过对各种构建T-树方案的理论和实验分析,提出的并行建树方案较传统的建树方案,在操作效率和空间利用率上均有明显的性能优势。为解决CUDA程序数据传输的瓶颈问题,通过页锁定内存的方式提高CPU和GPU间的数据传输速率;为适应未来硬件发展的需求,对算法的可扩展性进行相关研究;为验证方案的正确性,提出基于GPU T-树的遍历算法;为验证提出的并行方案的有效性,进行相关的实验论证。3.为加速多维数据的操作性能,提出一种基于GPU多维线性哈希索引的并行处理方案。该方案通过对传统哈希索引数据结构的扩展,利用2层的数据结构可实现哈希表在GPU上的任意收缩,从而解决多维数据在GPU上无法有效更新的问题。在哈希表的记录并行批量插入算法中,采用并行分裂哈希桶的方式可加速哈希表分裂的处理速度,从而提高了插入的效率;设计一个灵活的溢出桶管理机制,可提高多维哈希索引在GPU上的存储空间利用率;对提出的记录并行批量插入方案进行算法时间和空间复杂度的分析,并与传统的CPU算法进行相关对比;在各种硬件平台上对多维线性哈希索引记录的并行批量插入、批量删除和查询的操作性能进行相关的实验论证。4.提出一种基于GPU缓存敏感CSB+-树索引的无锁并行处理方案,该方案通过对传统的CSB+-树的结构改进,可实现CSB+-树的索引数据在GPU上动态更新。在GPU上提出基于树层和基于节点索引键CSB+-树两种并行构建算法,其中后者可实现对CSB+-树的最大并行度构建;通过在CSB+-树的内部节点添加填充位的方式,可减少GPU线程块里的线程分支数,从而提高CSB+-树的查询性能;通过对CSB+-树的查询算法使用共享存储器的可行性分析,指出传统的缓存敏感技术的思想在复杂的GPU内存框架中并不适合使用。为验证提出的并行方案的有效性,在多个硬件平台上进行相关的实验论证。5.在GPU平台上提出一种BD-树索引的并行计算方案,该方案通过修改传统BD-树的哈希函数,可实现对BD-树索引的并行处理。通过对传统BD-树的数据结构改进,可实现BD-树索引数据在GPU上的更新操作;通过分析BD-树的树形结构,可实现基于内部节点键的并行度方式构建BD-树;通过增加额外的空间开销,减少GPU原子函数的调用次数,可显著提高BD-树哈希表的数据插入效率;对BD-树并行构建算法进行空间复杂度的分析,与传统的构建算法相比,提出算法的空间利用率明显得到提高。同样,为验证提出方案的有效性,进行相关的实验论证。

论文目录

  • 摘要
  • Abstract
  • 第一章 绪论
  • 1.1 研究背景
  • 1.2 内存数据库索引
  • 1.3 GPU 通用计算技术的应用
  • 1.4 论文主要工作
  • 1.5 论文组织
  • 第二章 GPU通用计算的相关技术
  • 2.1 GPU 并行机制
  • 2.2 CUDA 体系结构
  • 2.3 CUDA 编程模型
  • 2.4 CUDA 执行模式
  • 2.5 CUDA 程序优化
  • 2.6 实验平台
  • 2.7 本章小结
  • 第三章 基于 GPU内存数据库索引 T-树的研究
  • 3.1 引言
  • 3.2 T-树基本理论
  • 3.2.1 T-树的结构
  • 3.2.2 T-树的基本操作
  • 3.3 基于 GPU 的 T-树并行方案
  • 3.3.1 数据结构
  • 3.3.2 T-树的并行构建算法
  • 3.3.3 T-树的遍历算法
  • 3.3.4 T-树的并行查询算法
  • 3.3.5 T-树的并行插入算法
  • 3.3.6 T-树的并行删除算法
  • 3.4 性能分析
  • 3.5 实验
  • 3.5.1 实验设计
  • 3.5.2 实验结果和分析
  • 3.6 程序的优化
  • 3.7 算法可扩展性分析
  • 3.8 本章小结
  • 第四章 基于 GPU多维线性哈希索引的研究
  • 4.1 引言
  • 4.2 多维线性哈希索引的理论
  • 4.2.1 一维线性哈希索引
  • 4.2.2 多维线性哈希索引
  • 4.3 基于 GPU 的多维线性哈希并行方案
  • 4.3.1 多维线性哈希的数据结构
  • 4.3.2 多维线性哈希的记录并行批量插入方案
  • 4.3.3 多维线性哈希的并行查询算法
  • 4.3.4 多维线性哈希的记录并行批量删除方案
  • 4.4 性能分析
  • 4.4.1 时间代价
  • 4.4.2 空间开销
  • 4.5 实验
  • 4.5.1 实验数据和设计
  • 4.5.2 实验结果和分析
  • 4.6 本章小结
  • +-树索引的研究'>第五章 基于 GPU缓存敏感 CSB+-树索引的研究
  • 5.1 引言
  • +-树基本理论'>5.2 CSB+-树基本理论
  • +-树索引的结构'>5.2.1 CSB+-树索引的结构
  • +-树的基本操作'>5.2.2 CSB+-树的基本操作
  • +-树并行方案'>5.3 基于 GPU 的 CSB+-树并行方案
  • 5.3.1 数据结构
  • +-树的并行构建算法'>5.3.2 CSB+-树的并行构建算法
  • +-树的并行查询算法'>5.3.3 CSB+-树的并行查询算法
  • +-树的并行插入算法'>5.3.4 CSB+-树的并行插入算法
  • +-树的并行删除算法'>5.3.5 CSB+-树的并行删除算法
  • 5.4 性能分析
  • 5.5 实验
  • 5.5.1 实验设计
  • 5.5.2 实验结果和分析
  • 5.6 本章小结
  • 第六章 基于 GPU的 BD-树索引研究
  • 6.1 引言
  • 6.2 BD-树相关技术
  • 6.2.1 BD-树的结构
  • 6.2.2 BD-树的操作
  • 6.2.3 基于内存索引的 BD-树
  • 6.3 基于 GPU 的 BD-树并行处理方案
  • 6.3.1 基于 GPU 的 BD-树的数据结构
  • 6.3.2 BD-树的并行构建算法
  • 6.3.3 BD-树的并行查询算法
  • 6.3.4 BD-树的并行插入算法
  • 6.3.5 BD-树的并行删除算法
  • 6.3.6 性能分析
  • 6.4 实验
  • 6.4.1 实验设计
  • 6.4.2 实验结果分析
  • 6.5 本章小结
  • 结论和展望
  • 参考文献
  • 攻读博士学位期间取得的研究成果
  • 致谢
  • 附件
  • 相关论文文献

    标签:;  ;  ;  

    基于GPU的内存数据库索引技术研究
    下载Doc文档

    猜你喜欢