关于异构数据源的整合与集成模式的研究 ——采用多服务器实现综合性能优化的OLAP系统

论文摘要

本论文在对分布式计算理论以及数据仓库的主要应用技术之一—在线分析处理(OLAP)技术深入分析的基础上,设计并实现了采用主从式多复制应用服务器的OLAP系统。采用主从式多复制应用服务器的OLAP系统主要是针对单OLAP服务器系统在稳定性、可扩展性、快速响应和不间断运行上的缺点提出的。新系统采用主从式多服务器技术把数据相同的多个OLAP服务器有机地组成一个系统向客户提供服务。论文首先对数据仓库和OLAP理论作了全面的分析,尤其对数据仓库的组织结构、OLAP的多维特性和数据组织方式进行了深入的研究。在对多维查询语言的深入研究上,提出多维查询的可拆分理论。同时对OLAP的发展趋势作了一定的研究。在研究多服务器系统的基础上,提出多复制服务器系统的概念,并对多复制服务器系统的系统结构和负载分配进行深入的研究。随后重点研究多复制服务器系统的数据更新,提出无阻塞数据更新理论,并提供数据更新和数据协调分别在更新发起点和更新复制点的4个算法。根据前面的研究和理论成果以及课题的目的和相关条件,同时对当前的OLAP系统和分布式技术作了较为深入的分析,得出新系统是采用TCP/IP网络技术和多复制服务器的主从式多复制应用服务器的OLAP系统。接着对新系统按照软件工程的方法进行系统的分析和设计。论文最后对系统进行全方面的优化,主要是在OLAP多维数据库和主从式多服务器两大部分上进行。具体包括数据源、立方体和MDX的优化以及多线程技术的采用和查询智能拆分的开发。

论文目录

• 目录
• 摘要
• ABSTRACT
• 第1章 绪论
• 1.1 研究背景
• 1.2 OLAP的研究现状和发展趋势
• 1.3 多服务器系统的研究现状和发展趋势
• 1.4 本文的主要研究内容
• 第2章 数据仓库的OLAP技术
• 2.1 数据仓库理论
• 2.1.1 数据仓库的定义
• 2.1.2 数据仓库的特征
• 2.2 数据仓库结构
• 2.3 OLAP概述
• 2.3.1 OLAP的定义
• 2.3.2 OLAP的特征
• 2.4 OLAP的结构和数据组织
• 2.4.1 OLAP的结构
• 2.4.2 OLAP的数据组织方式
• 2.5 OLAP查询的可拆分性研究
• 2.6 OLAP的发展
• 2.6.1 WEB OLAP
• 2.6.2 OLAP+数据挖掘
• 2.7 本章小结
• 第3章 多复制服务器系统
• 3.1 多复制服务器系统概述
• 3.2 多复制服务器系统的组织形式
• 3.2.1 集中式服务器集群
• 3.2.2 分布式服务器集群
• 3.3 多复制服务器系统数据和负载的分配
• 3.4 多复制服务器系统数据的无阻塞更新
• 3.4.1 多复制服务器的数据更新
• 3.4.2 多复制服务器的数据协调
• 3.5 本章小结
• 第4章 多复制服务器OLAP系统的分析
• 4.1 当前主要OLAP系统的分析
• 4.1.1 Oracle OLAP工具
• 4.1.2 Microsoft OLAP工具
• 4.1.3 IBM OLAP工具
• 4.2 当前分布式应用的分析
• 4.2.1 分布式应用的现状
• 4.2.2 本课题中多服务器系统的选择
• 4.3 多复制服务器OLAP系统设计的目标和功能
• 4.4 多复制服务器OLAP系统的物理和逻辑模型
• 4.5 本章小结
• 第5章 多复制服务器OLAP系统的设计和实现
• 5.1 系统设计的概述
• 5.2 OLAP多维数据库的设计与实现
• 5.2.1 OLAP多维数据库的数据来源—数据仓库的设计
• 5.2.2 OLAP多维数据库的建立
• 5.3 主从式应用服务器系统的设计与实现
• 5.3.1 Socket基础通讯模块的设计
• 5.3.2 主从式应用服务器系统的设计
• 5.4 系统中其它部分的设计
• 5.5 本章小结
• 第6章 系统的优化和实验结果
• 6.1 OLAP多维数据库的优化
• 6.1.1 OLAP数据源—关系数据库的优化
• 6.1.2 维和立方体的优化
• 6.1.3 MDX查询和计算的优化
• 6.2 主从式多复制服务器的优化
• 6.3 OLAP系统实验结果
• 6.4 本章小结
• 结论
• 致谢
• 参考文献