数据集成技术及其应用研究

数据集成技术及其应用研究

论文摘要

随着社保审计范围不断扩大,需要处理的业务数据呈现多源化、异构化、海量化等特点,因此如何实现异构分布式数据源信息共享成为当前亟待解决的问题。本文研究的数据集成技术对异构分布式数据源进行逻辑集成,利用中间件技术形成一个虚拟数据库,它向上为用户提供统一的数据访问接口,向下屏蔽底层异构数据源。数据集成技术可应用于社保审计分布式业务数据查询中。本文主要工作包括数据集成系统框架设计,数据集成算法研究。数据集成系统框架设计包括总体架构设计、中间件逻辑结构设计、数据持久层设计、部件交互设计。中间件结构设计是关键,它在逻辑上由语法分析器、查询重写器、包装器、连接池、结果整合器等组成。数据集成算法包括查询重写算法和结果整合算法。查询重写算法将面向全局模式的查询重写为面向各数据源模式的子查询,它基于三叉链树将查询语句展开,并对树中的模式和属性节点分类映射。结果整合算法主要对结果集进行连接操作、分组操作及嵌套查询;连接操作使用预处理技术对结果集进行排序,分组操作基于平衡树进行,嵌套查询利用Hash映射和迭代器完成。最后本文对给出的算法进行实验和分析。

论文目录

  • 摘要
  • Abstract
  • 第1章 绪论
  • 1.1 研究背景及意义
  • 1.2 国内外研究现状
  • 1.3 主要研究内容
  • 1.3.1 数据集成系统框架设计
  • 1.3.2 查询重写算法研究
  • 1.3.3 查询结果整合算法研究
  • 1.4 论文组织结构
  • 第2章 基本理论及相关技术
  • 2.1 数据集成语义
  • 2.1.1 数据集成系统组成
  • 2.1.2 数据集成系统语义模型
  • 2.1.3 数据集成系统查询语义
  • 2.2 数据集成方法
  • 2.2.1 LAV 方法
  • 2.2.2 GAV 方法
  • 2.2.3 GLAV 与P2P 方法
  • 2.2.4 LAV 和GAV 方法比较
  • 2.3 语义冲突及解决方案
  • 2.3.1 属性名称冲突
  • 2.3.2 数据类型冲突
  • 2.3.3 缺省值冲突
  • 2.3.4 数据单位冲突
  • 2.4 数据集成系统使用技术
  • 2.4.1 连接池技术
  • 2.4.2 DTD 和XML Schema 校验
  • 2.4.3 XQuery 查询技术
  • 2.5 本章小结
  • 第3章 数据集成系统框架设计
  • 3.1 总体架构设计
  • 3.2 中间件逻辑结构设计
  • 3.3 数据持久层设计
  • 3.4 部件交互设计
  • 3.5 本章小结
  • 第4章 数据集成算法研究
  • 4.1 查询重写算法
  • 4.1.1 桶算法和逆规则算法
  • 4.1.2 基于三叉链树的算法
  • 4.2 查询结果整合算法
  • 4.2.1 结果集连接算法
  • 4.2.2 结果集分组算法
  • 4.2.3 嵌套查询算法
  • 4.3 本章小结
  • 第5章 算法实验与分析
  • 5.1 实验环境配置
  • 5.2 查询重写算法实验与分析
  • 5.3 结果整合算法实验与分析
  • 5.4 本章小结
  • 结论
  • 参考文献
  • 攻读硕士学位期间发表的论文和取得的科研成果
  • 致谢
  • 相关论文文献

    • [1].探讨数据集成技术在企业数据系统管理中的应用[J]. 创新科技 2013(09)
    • [2].数据集成技术在我国林业中的应用进展[J]. 世界林业研究 2018(02)
    • [3].数据集成技术研究[J]. 办公自动化 2012(10)
    • [4].指挥系统数据集成技术研究[J]. 舰船电子工程 2012(03)
    • [5].电力营销数据分析中的数据集成技术研究[J]. 科技与创新 2014(11)
    • [6].数据集成技术综述[J]. 电脑知识与技术 2008(24)
    • [7].医疗数据集成技术在阳山县分级诊疗实践中的应用[J]. 现代经济信息 2016(03)
    • [8].基于数据仓库的船舶建造数据集成技术研究[J]. 工业控制计算机 2020(09)
    • [9].基于信息共享的城市轨道交通监控数据集成技术的研究[J]. 铁路计算机应用 2013(09)
    • [10].数据集成技术在陕西省防汛信息整合中的应用[J]. 中国科技信息 2009(02)
    • [11].关于企业EAI数据集成技术建设的相关探究[J]. 通讯世界 2013(19)
    • [12].现代制造业中DCS与OA、ERP系统的数据集成技术研究[J]. 管理观察 2008(12)
    • [13].数据集成技术在电子政务系统建设中的应用[J]. 电脑知识与技术 2009(08)
    • [14].基于CityMaker的市政工程多源BIM与3DGIS数据集成技术[J]. 科学技术创新 2019(05)
    • [15].企业EAI数据集成技术建设相关研究[J]. 电子制作 2013(12)
    • [16].数据仓库元数据集成技术研究与应用[J]. 计算机技术与发展 2011(09)
    • [17].基于多数据库环境数据集成技术的研究[J]. 电脑知识与技术 2015(36)
    • [18].基于GML的空间数据集成技术研究[J]. 地理信息世界 2014(02)
    • [19].地质多源数据集成技术[J]. 科技创业家 2012(24)
    • [20].基于SOA的社区矫正系统中数据集成技术的初步研究[J]. 网络安全技术与应用 2017(05)
    • [21].GIS动态数据集成技术及其在移动网络运维管理中的应用研究[J]. 电子测试 2016(20)
    • [22].面向产业链协同平台的物流链多企业数据集成技术研究[J]. 黑龙江科技信息 2017(02)
    • [23].工业4.0背景下的新思维[J]. 航空制造技术 2014(18)
    • [24].医院感染系统开发中的数据集成技术[J]. 现代经济信息 2015(01)
    • [25].云制造下玻璃加工设备数据集成技术研究[J]. 工业控制计算机 2017(04)
    • [26].异构计算机辅助设计工艺数据集成技术[J]. 造船技术 2020(05)
    • [27].基于工作流的跨部门协同业务管理系统[J]. 软件 2020(05)
    • [28].数据集成技术初探[J]. 科技广场 2009(09)
    • [29].基于安全数据字典的数据集成技术研究[J]. 计算机工程与设计 2013(05)
    • [30].XML与数据集成[J]. 景德镇高专学报 2009(02)

    标签:;  ;  ;  ;  ;  

    数据集成技术及其应用研究
    下载Doc文档

    猜你喜欢