综合录井仪数据迁移及转换接口技术研究

论文摘要

目前综合录井数据大部分保存在综合录井仪自身配带的Access、SQL Server等数据库中,数据格式不统一,数据项不全面,数据相互之间不能共享,使的这些宝贵的数据得不到充分的利用。因此,结合目前已有的数据迁移转换技术,设计一个综合录井仪数据迁移转换接口是十分必要的,将目前来源离散且格式多样的录井数据进行标准化处理,再将这些经过标准化处理的规范数据迁移到一个综合数据库中,为给研究部门和管理部门提供标准确的数据信息,实现数据共享打基础。本接口的设计是基于中间件技术和XML(eXtensible Markup Language,可扩展标记语言)技术的,采用中间件技术实现数据迁移,不仅能屏蔽掉底层综合录井仪的异构性,实现用户对数据库的透明操作,还可以使接口具有良好的可扩展性。采用XML技术进行数据转换,不仅因为XML的开放性、可扩展性及XSLT(eXtensible Stylesheet Language for Transformations,扩展样式转换语言)对数据格式转换功能,是转换油田复杂数据源所需要的特点,更重要的是因为WITSML(Wellsite Information Transfer Standard Markup Language)是基于XML的井场信息传输标准标记语言,并且日益成为钻井数据传输和保存的标准语言。本接口由三个相对独立且相互关联的部分组成,即数据查询模块、数据转换模块和数据加载模块。其中数据查询模块负责实现用户对各录井仪异构数据库的透明访问,选择需要迁移的数据库内容;数据转换负责将选中的需迁移数据从数据库中抽取出来,并将其转换成统一的XML文档呈现给用户;数据加载模块负责将XML文档中的信息加载到目标数据库中去。最后,通过实现Access数据库和SQL Server数据库中的数据到Oracle数据库的迁移,验证了数据迁移转换接口方案的可行性。

论文目录

• 摘要
• Abstract
• 第1章 绪论
• 1.1 课题研究背景及意义
• 1.2 国内外研究现状
• 1.3 主要研究工作
• 1.4 论文结构
• 第2章 数据迁移与转换技术研究及数据接口总体设计
• 2.1 综合录井仪异构数据库及异构数据的特征
• 2.2 数据接口设计要解决的问题
• 2.3 常用数据迁移方法分析及选择
• 2.3.1 利用数据库厂商的专业工具
• 2.3.2 利用前台开发工具
• 2.3.3 利用动态SQL 语句
• 2.3.4 基于中间件的解决方法
• 2.3.5 录井数据迁移方法的选择
• 2.4 常用数据转换技术分析及选择
• 2.4.1 基于ODBC 的数据转换
• 2.4.2 基于OLE DB 的数据转换
• 2.4.3 基于XML 的数据转换
• 2.4.4 录井数据转换方法的选择
• 2.5 数据接口总体设计
• 2.5.1 接口设计目标及设计原则
• 2.5.2 接口总体结构
• 2.5.3 接口总体功能与层次结构
• 2.5.4 数据迁移的流程
• 2.5.5 本接口的优点
• 2.6 本章小结
• 第3章 数据接口功能模块的设计与实现
• 3.1 基于JDBC 数据查询模块的设计与实现
• 3.1.1 JDBC
• 3.1.2 数据查询过程
• 3.1.3 数据查询的实现
• 3.2 基于XML 的数据转换模块的设计与实现
• 3.2.1 关系型数据到XML 的映射方法
• 3.2.2 XML 应用程序接口
• 3.2.3 XML 文档格式定义语言
• 3.2.4 数据转换模块的设计
• 3.2.5 数据转换实现过程
• 3.3 数据加载模块的设计与实现
• 3.3.1 XML 在Oracle 数据库中的存储方法
• 3.3.2 数据加载过程
• 3.3.3 数据加载的实现
• 3.4 本章小结
• 第4章 综合录井仪数据迁移转换接口试验
• 4.1 试验环境
• 4.2 试验说明
• 4.3 试验步骤
• 4.4 具体操作
• 4.5 本章小结
• 结论
• 参考文献
• 攻读硕士学位期间取得的学术成果
• 致谢