运营数据仓储（ODS）在电信企业数据集成中的应用

论文摘要

在我国,多年的信息化数据集成建设使国内大部分企业机构都由传统的数据库结构转换为使用基于DB-DW的两层体系架构进行数据集成模式,得到了很大的突破,同时也积累了大量历史数据。随着信息产业的进一步发展,越来越多的客户数据给原有的数据集成体系提出了新的挑战。为了能够在向管理者提供全局一致的信息视图,并满足不同层次用户的分析需求,数据集成逐渐开始使用一种新的基于DB-ODS-DW的三层体系结构。其中,ODS的出现不但承担了承上启下的艰巨任务,同时为企业全局一致的数据视图提供了平台,并且实现了时效性和全局性兼具的性能要求。江西电信出于行业竞争的压力和庞大的业务要求也开始考虑使用ODS技术来实现数据集成管理架构。考虑到目前江西电信的应用现状,本文论述了在对江西电信数据系统进行架构设计时需要考虑的问题及解决方案,并最终设计了基于DB-ODS-DW的系统架构。本文介绍了ODS的定义、特点、分类及其与DB和DW的区别联系,描述了数据仓库ETL、数据集市等数据库相关的定义、分类和作用等基础知识,介绍了大型企业ODS设计的定义、原则、步骤及其详细架构,以江西电信的ODS设计实施为背景,探讨了ODS系统构建的方法。该方法包括概念、逻辑和物理等三个模型,完善了从基于DB-DW两层体系架构向基于DB-ODS-DW三层体系架构数据集成平台转变过程。同时,设计出较为完整的ODS总体架构、功能架构和ODS组件设计,在江西电信企业中实践取得一定成效。

论文目录

• 摘要
• Abstract
• 第1章 绪论
• 1.1 数据仓库及ODS技术发展概述
• 1.2 ODS在电信行业中的应用现状
• 1.3 研究内容
• 1.4 论文结构
• 第2章 ODS相关概念对比研究
• 2.1 企业数据仓库
• 2.1.1 数据仓库（DW）
• 2.1.2 操作型数据存储（ODS）
• 2.1.3 企业级数据仓库
• 2.1.4 DW与ODS性能比较
• 2.2 数据集市
• 2.3 数据集成
• 2.4 数据仓库ETL
• 第3章 江西电信数据管理系统设计
• 3.1 中国电信集团管理/运营支撑系统
• 3.2 江西电信信息管理系统现状概述
• 3.2.1 现状概述
• 3.2.2 系统概述
• 3.2.3 江西电信引入ODS的重要性
• 3.3 ODS系统设计
• 3.3.1 需求分析
• 3.3.2 概念模型的设计
• 3.3.3 逻辑模型的设计
• 3.3.4 物理模型的设计
• 第4章 ODS架构的组件设计
• 4.1 ODS设计的技术支持
• 4.2 ODS应用的功能定义
• 4.3 ODS架构的组件设计方案
• 4.3.1 应用数据抽取
• 4.3.2 ODS数据整合与数据质量管理
• 4.3.3 数据质量管理流程
• 4.3.4 备份策略及磁带库
• 4.4 ODS系统硬件平台
• 4.4.1 ODS/EAI服务器
• 4.4.2 ODS数据共享服务器
• 4.4.3 ODS数据采集服务器
• 4.4.4 数据质量管理服务器
• 4.4.5 EAI服务器
• 4.4.6 SAN交换机
• 4.5 系统软件平台
• 4.6 数据质量管理系统软件平台
• 4.7 应用软件
• 第5章 结论
• 5.1 工作总结
• 5.2 工作展望
• 参考文献
• 致谢