海量多数据库集成系统的Mediator和Wrapper机制的设计与实现

论文摘要

日益增长的海量数据使得信息集成日益重要,数据存储的异构性成为一个热点研究问题。信息集成技术有很多现有的方法,本文使用了基于Mediator和Wrapper机制的方法实现了信息集成的原型系统以解决数据异构问题。problems.Mediator方法使用了虚拟的协调器,通过解析用户查询,隐藏底层数据源的数据信息,进行属性映射,查询处理,分解和下发。底层数据源通过包装器进行处理,统一异构数据源的数据模式与查询语言。Mediator系统的数据字典模块采用关系数据库的表结构来存储,供Mediator系统查询处理,结果合并使用。独立的访问数据字典模块,被用来读写以关系数据库的表的形式来存储的数据字典。Wrapper系统用来包装底层数据源,它接受Mediator系统传来的查询,进行查询解析和属性映射,下发查询到底层数据源,对返回结果进行处理,包括调整字节序和处理空值。处理结果中为了考虑效率因素,使用了很多机制,保证了一趟扫描全部数据。MDL语言和WDL语言被用来维护系统中的Mediator和Wrapper。MDL语言包括了创建Mediator的语言和注册Wrapper语言,WDL语言则用来维护Wrapper的映射关系和属性信息。本文使用了一个实例来说明原型系统,创建了对应的Mediator和Wrapper,随着查询在各个模块间传递的变换形式来说明系统是如何运作以解决数据异构的问题的。通过原型系统的实验,信息集成技术的虚拟方法有效地解决了数据异构的问题。

论文目录

• 摘要
• Abstract
• 第1章 绪论
• 1.1 信息集成技术的背景知识
• 1.1.1 信息集成技术中的关键词
• 1.1.2 国内外研究现状
• 1.1.3 信息集成方法中的虚拟方法
• 1.2 信息集成系统的结构和功能
• 1.2.1 信息集成系统的结构和各部分的功能
• 1.2.2 本文的主要研究内容
• 1.3 小结
• 第2章 Mediator机制的设计与实现
• 2.1 Mediator系统的结构和功能
• 2.2 数据字典模块的设计与实现
• 2.2.1 数据字典模块的存储内容
• 2.2.2 数据字典模块的存储结构
• 2.3 数据字典的访问
• 2.4 小结
• 第3章 Wrapper机制的设计与实现
• 3.1 Wrapper系统的结构与功能
• 3.2 Wrapper服务器以及系统的网络协议
• 3.2.1 Wrapper服务器的结构和功能
• 3.2.2 网络连接协议
• 3.3 访问底层数据源
• 3.3.1 发送给底层数据源的查询
• 3.3.2 访问底层数据源的模块所提供的各种功能描述
• 3.3.3 访问底层数据源的各种机制
• 3.4 查询解析与属性映射
• 3.4.1 查询解析和属性映射模块的结构和功能
• 3.4.2 查询解析
• 3.4.3 属性的映射
• 3.5 小结
• 第4章 MDL语言与WDL语言的设计与实现
• 4.1 MDL语言和WDL语言概述
• 4.2 MDL语言的设计与实现
• 4.3 WDL语言的设计与实现
• 4.4 小结
• 第5章 多数据库集成系统的实现
• 5.1 Wrapper系统和底层数据源的数据模式
• 5.2 Mediator系统数据字典的内容
• 5.3 一个实例查询的执行过程
• 5.4 小结
• 结论
• 参考文献
• 致谢