分布式海量数据并行传输的研究与实现

论文摘要

随着信息化技术的不断发展,行业内部和行业间的业务数据量呈几何级数递增,海量数据的传输与处理难题成为制约信息化产业扩大的瓶颈,本文提出一种分布式海量数据并行传输设计与实现技术,系统采用了计算机集群及并行处理技术,以MobiLink技术为基础,将传输任务分解为若干个子任务,采用多台传输处理机分工并行传输方式,解决了海量数据传输处理上的瓶颈,在很大程度上解决了异构数据库系统间数据传输不兼容的问题;基于多路径QoS路由算法实现了目标智能路由,可以有效地均衡网络负载,提高网络资源利用率,从而实现了大型网络系统中异构数据库信息系统间海量数据信息并行交换。

论文目录

• 摘要
• ABSTRACT
• 第一章 绪论
• 1.1 本文研究的目的和意义
• 1.2 国内外研究现状
• 1.3 本文的主要工作和组织结构
• 第二章 计算机集群及并行处理技术简介
• 2.1 计算机集群简介
• 2.2 计算机集群的发展背景
• 2.3 计算机集群技术的特点
• 2.4 计算机集群的分类
• 2.5 计算机并行处理技术简介
• 2.6 小结
• 第三章 中间件技术概述
• 3.1 引言
• 3.2 中间件的特点
• 3.3 中间件的分类
• 3.4 消息中间件
• 3.5 MOM 涉及的技术
• 3.6 消息中间件的发展现状
• 3.7 小结
• 第四章 Sybase 的 MobiLink 技术的传输机制
• 4.1 MobiLink 的传输结构
• 4.2 MobiLink 的同步过程
• 4.3 MobiLink 的同步特性
• 4.4 MobiLink 的同步过程技术
• 4.5 MobiLink 的同步脚本
• 4.6 MobiLink 的同步方式
• 4.7 MobiLink 同步中的冲突处理
• 4.8 MobiLink 的性能
• 4.9 小结
• 第五章 多约束 QoS 路由的一种启发式算法
• 5.1 QoS 路由算法简介
• 5.2 基于 Dijkstra 的 QoS 路由算法
• 5.3 QoS 路由的约束条件
• 5.4 多约束 QoS 路由的一种启发式算法
• 5.5 小结
• 第六章 分布式海量数据并行传输的实现
• 6.1 系统体系结构
• 6.2 系统总体设计
• 6.3 系统数据库结构设计
• 6.4 系统详细设计
• 6.5 实验结果分析
• 6.6 小结
• 第七章 结束语
• 7.1 本文工作总结
• 7.2 展望
• 致谢
• 参考文献