数据仓库技术在外贸行业的应用与实现

论文摘要

近几年来,市场经济在国内取得了空前的飞速发展,国际上全球经济一体化的趋势日趋明显。国内企业将面临愈加激烈的市场竞争,只有了解自己,了解用户,了解对手,做到及时有效地响应市场,这样才能在激烈的市场竞争中取得生存和发展。上海兰生(集团)有限公司是国内进出口贸易行业的模范企业,旗下拥有全国第一家外贸上市公司兰生股份公司等一些历史悠久的专业外贸公司,几年来在下属各外贸成员企业里建成了一套具有特色的外贸ERP管理系统,但是面对着ERP系统日积月累的庞大数据,迫切需要建立平台把海量的,长期积累的数据转化为有用的,可靠的信息和知识,对我们的管理者提供科学的决策分析支持。本文首先阐述了兰生集团现有信息系统的现状,ERP系统在下属各企业用于基层业务操作管理,该ERP系统为C/S架构、在各企业拥有独立的数据库存放ERP系统数据,要在集团层面实现决策分析平台的设计,就要实现基于internet模式的数据抽取,从而保证数据仓库ods层获取最新的来自ERP系统的更新数据。然后对与此项目涉及的数据仓库和ETL技术理论做了阐述,介绍了数据仓库的概念、数据仓库的体系化环境、数据组织和主要的建模方法;讲解了ETL理论的抽取、转换、装载策略。接着探讨了操作型数据存储。介绍了ODS的概念与分类,并详细介绍了ODS数据组织和装载策略最后讲解了接口ETL数据抽取的实现,详细分析兰生集团的数据仓库核心模块中主题、维度、度量、粒度的选择和设计并介绍了兰生决策分析平台系统的项目管理工作。本文从外贸行业的国有大型企业上海兰生(集团)有限公司的决策分析平台项目入手,详细探讨了数据仓库设计及具体的实现方法,兰生成为中国外贸行业第一家在ERP系统平台上,成功实施从基于ERP系统多个数据库中实现远程数据抽取、转换、装载,最终通过数据仓库技术实现决策分析的外贸企业。该研究项目对今后数据仓库技术在外贸行业领域的广泛推广打下了扎实的基础,提升信息技术在辅助外向型企业战略目标制订中的地位与作用。

论文目录

• 摘要
• Abstract
• 引言
• 第1章 兰生集团的信息化应用现状
• 1.1 兰生集团的信息化应用历程
• 1.2 课题的提出
• 1.3 研究内容
• 1.4 论文结构
• 第2章 数据仓库与ETL
• 2.1 数据仓库技术
• 2.1.1 数据仓库的概念
• 2.1.2 数据仓库的体系化环境
• 2.1.3 数据仓库中的数据组织
• 2.1.4 数据仓库的建模方法
• 2.1.5 数据仓库实现策略
• 2.1.6 数据仓库的开发目标和实现范围
• 2.2 数据仓库ETL
• 2.2.1 ETL综述
• 2.2.2 数据抽取（Extract）
• 2.2.3 数据转换（Transform）
• 2.2.4 数据加载
• 2.2.5 ETL方式选择
• 第3章 操作型数据存储
• 3.1 ODS概念与分类
• 3.2 DB-ODS-DW体系结构
• 3.3 DB-ODS-DW体系与DB-DW体系的区别
• 3.4 ODS数据组织
• 3.5 ODS数据装载策略
• 3.5.1 增量数据捕获策略
• 3.5.2 增量数据装载策略
• 第4章 ODS系统数据ETL实现
• 4.1 增量数据捕获的实现
• 4.2 ETL工具的设计与部署
• 4.2.1 ODS区数据采集适配器设计
• 4.2.2 数据转换、清洗
• 4.2.3 数据加载
• 4.2.4 ETL数据质量控制检验
• 第5章 兰生决策分析平台系统实现
• 5.1 系统应用背景
• 5.2 基于DB-ODS-DW的系统架构
• 5.3 决策分析平台系统项目管理
• 5.3.1 项目组织
• 5.3.2 项目范围与目标
• 5.3.3 需求调研与实施步骤
• 5.3.4 计划管理与控制
• 5.3.5 项目质量与风险评估策略
• 5.4 数据仓库模型设计
• 5.4.1 粒度的划分
• 5.4.2 度量和维的选取
• 5.4.3 核心数据模型的建立
• 5.5 兰生决策分析平台
• 第6章 总结
• 参考文献
• 后记