分析报表系统中ETL和数据集市的架构设计和实现

论文摘要

在现代企业中ERP已经成为了企业事务处理的核心,围绕着ERP平台又聚集了各种各样的系统,但所有这些系统都表现出基于特定事务的共同特点,所以这些系统中的数据并不能直接为企业决策层所用,从而限制了企业决策过程的正确进行。作者结合实际工作的需求,在设计和实现某公司商务部分析报表系统的过程中对ETL与数据集市的架构进行了研究。该系统是某大型外资企业进行商务决策过程所需的分析报表系统,该系统能向相关部门提供每日更新、准确可靠的报表数据,且报表用户可以通过钻取、切片和切块等操作来分析所关心的数据信息。该系统的设计和实现过程涉及到数据抽取、数据集市建立和前台分析报表等关键技术。论文系统地总结了作者在工作过程中所取得的成果,概括如下:1.就ETL过程中的几个重大问题进行了全盘考虑和综合处理,实现了较通用的企业ETL构架设计,从而为企业内数据仓库的构建打下了坚实的基础。2.根据客户的要求,设计和实现了结构合理、适合分析的数据集市。3.利用合适的工具,构建分析报表,提供用户钻取、切片和切块的分析手段。论文的研究和系统的实现,不仅完成了分析报表的设计目标,更实现了公司内数据ETL的平台,为后续其他分析报表的制作以及更长远的商业智能的实现打下了很好的数据基础,同时也是在数据仓库和数据挖掘等研究领域中的一次有益尝试。

论文目录

• 中文摘要
• ABSTRACT
• 第一章 绪论
• 1.1 决策支持和数据仓库的基本概念
• 1.1.1 决策支持系统的概念
• 1.1.2 决策支持的分类
• 1.1.3 数据仓库及 ETL 的基本概念
• 1.1.4 传统决策支持系统的问题
• 1.1.5 数据仓库实现中的关键过程
• 1.2 数据仓库的研究现状和发展
• 1.3 论文研究内容、目的和意义
• 1.3.1 论文课题来源
• 1.3.2 论文研究内容
• 1.3.3 论文研究的目标和意义
• 1.3.4 系统开发的要求
• 1.3.5 本论文的结构安排
• 第二章 系统需求分析与设计
• 2.1 系统需求分析
• 2.2 系统实现的基本原则
• 2.3 ETL 及数据仓库建立中的问题和方案的设计
• 2.3.1 数据质量影响因素分析
• 2.3.2 历史记录、增量导出和错误处理的问题分析及其解决方案
• 2.4 数据集市建立中的问题及其解决方案的设计
• 2.5 分析报表的制作
• 2.6 小结
• 第三章 ETL 过程的实现
• 3.1 ETL 过程中架构的产生
• 3.2 ETL 实现过程中需要使用的技术
• 3.2.1 触发器技术
• 3.2.2 SQL
• 3.3 ETL 实现过程中用到工具的特点与区别
• 3.3.1 DataStage 的特点
• 3.3.2 Informatica 的特点
• 3.3.3 二者的区别
• 3.4 ETL 的解决方案
• 3.4.1 增量导出的解决方案
• 3.4.2 出错后自动修复的解决方案
• 3.4.3 历史记录的获取方案
• 3.5 整体方案的具体实现过程
• 3.6 小结
• 第四章 数据集市的建立
• 4.1 数据集市中涉及的几个概念
• 4.2 需求收集
• 4.3 数据结构设计
• 4.3.1 整体机构介绍
• 4.3.2 维表层次结构的确定
• 4.3.3 环问题的解决
• 4.3.4 各种设计陷阱的避免
• 4.4 小结
• 第五章 前台分析报表的制作
• 5.1 BO UNIVERSE 的主要功能
• 5.1.1 为抽象的数据字段添加说明
• 5.1.2 设计层次
• 5.1.3 辅助检查
• 5.2 分析报表的建立
• 5.3 小结
• 第六章 总结与展望
• 6.1 总结
• 6.2 进一步工作的展望
• 6.2.1 目前存在的不足
• 6.2.2 系统未来的展望
• 参考文献
• 攻读学位期间出版或公开发表的论著、论文
• 致谢
• 详细摘要