结构化对等网络路由机制关键技术研究

结构化对等网络路由机制关键技术研究

论文摘要

结构化对等网络是一种采用纯分布式的消息传递机制和根据关键字进行查找的定位服务模型,目前在分布式存储、应用层多播、文件共享等领域已经得到广泛应用。结构化对等网络路由算法研究面临许多问题,例如状态和效率的折衷、拓扑失配、查询热点、结点异构等,如何解决这些问题具有重要意义。本文针对结点异构、查询热点、降低系统负载等关键技术问题进行了较为深入的研究,论文主要包括以下工作:(1)普遍认为在结构化P2P协议中实现能力感知会增加网络开销,如何建立高效、低开销的能力感知协议具有重要意义。分析了传统的结点通过周期性交换路由表信息实现能力感知的算法,该算法收敛时间长且不可避免增大网络开销。提出一种高效的能力感知协议-HeteroChord,HeteroChord协议在结点的路由表建立算法、更新算法、路由表维护算法中实现能力感知。HeteroChord协议在新结点加入时即可计算出需要更新的其他结点,能力感知速度快、效率高。实验结果表明,建立同样大小的网络,HeteroChord中结点更新算法产生的总开销远小于Chord;在动态环境下,HeteroChord具有比Chord更小的维护开销。(2)以HeteroChord为基础建立了一种虚拟双层结构化模型Vring,Vring的外层是由所有结点组建的结构化HeteroChord网络,内层是由超级结点组建的Chord网络。Vring与目前典型的双层结构化网络模型不同的是:超级结点具有和普通结点相同的路由表大小,仅比普通结点多维护一个超级叶子结点集,超级结点路由表维护简单;单个超级结点失败不会造成其他结点脱离网络,不存在单点故障。建立了三种Vring的简单应用系统,通过实验测试了基于本地索引的非DHT查找方式的数据共享系统的查询特征。(3) P2P系统是一种分布式系统,降低系统负载对提高P2P系统的扩展性具有重要意义。目前结构化P2P协议主要利用缓存方法解决查询热点问题,这些缓存方法对数据缓存后的收益无法预测,是一种较盲目的缓存,往往导致系统负载加重。提出一种结构化P2P协议中的缓存计算模型,该模型以降低系统负载为目标,结点采用一种文件访问统计方法跟踪查询本地文件的消息途经邻居结点的历史次数,根据文件访问历史统计记录预测缓存该文件到邻居结点可能减少的查询负载,然后与缓存后可能产生的更新开销对比,进而确定是否缓存文件到相应的邻居结点。实验表明,该缓存计算模型可以有效降低系统负载。(4)仅采用虚拟服务器、多Hash技术或复制不能解决Zipf查询环境下的负载均衡问题。提出一种自适应负载均衡方法,方法采用一种被动式结点负载统计方法生成局部负载视图;采用一种文件访问统计方法生成局部文件访问视图;当系统内结点负载存在差异,重载结点把指向自身的逻辑链路迁移至指向局部负载视图中的轻载结点,通过减小重载结点入度和增加轻载结点入度来减小结点间负载差异;当结点的请求负载较高时,通过局部文件访问视图计算需要缓存的热点文件及目标结点,降低承载热点文件的结点的请求负载。实验表明,在用户查询服从Zipf分布的环境下,自适应负载均衡方法可使结点负载达到较好的均衡。(5)分析了Zipf查询下无状态限制的结构化P2P协议的结点负载不平衡的形成因素,提出一种适合于该类结构化P2P协议的PLC负载均衡方法,该方法采用负载感知的被动式路由表维护算法和基于概率的路由算法提高轻载结点作为路由中继结点的概率,并通过一种缓存机制来降低承载热点文件的结点的请求负载。实验表明,在用户查询服从Zipf分布的环境下,PLC负载均衡方法可使系统达到较好的负载均衡。

论文目录

  • 摘要
  • Abstract
  • 第1章 绪论
  • 1.1 计算模式演变
  • 1.1.1 大型机模式
  • 1.1.2 客户机/服务器模式
  • 1.1.3 对等计算模式
  • 1.2 P2P 技术
  • 1.2.1 P2P 定义与特点
  • 1.2.2 P2P 系统分类
  • 1.2.3 P2P 计算技术的应用研究
  • 1.3 结构化对等网络路由算法研究面临的主要问题
  • 1.3.1 状态与效率的权衡
  • 1.3.2 拓扑失配
  • 1.3.3 查询热点
  • 1.3.4 结点异构
  • 1.4 本文主要工作
  • 1.5 论文结构与章节安排
  • 第2章 结构化对等网络路由算法概述
  • 2.1 结构化对等网络路由算法概述
  • 2.1.1 Chord
  • 2.1.2 EpiChord
  • 2.1.3 Plaxton Mesh
  • 2.1.4 Tapestry
  • 2.1.5 Pastry
  • 2.1.6 Kademlia
  • 2.2 小结
  • 第3章 高效的能力感知结构化P2P 协议
  • 3.1 引言
  • 3.2 相关工作
  • 3.3 传统能力感知协议HeteroPastry
  • 3.3.1 基本概念
  • 3.3.2 HeteroPastry 能力感知协议
  • 3.4 能力感知协议HeteroChord
  • 3.4.1 路由表建立规则
  • 3.4.2 leaf set
  • 3.4.3 结点加入
  • 3.4.4 结点失败与路由表维护机制
  • 3.5 实验对比
  • 3.6 小结
  • 第4章 虚拟双层结构化模型
  • 4.1 引言
  • 4.2 两类典型的双层结构化网络模型
  • 4.3 虚拟双层结构化模型Vring
  • 4.4 Vring 应用系统
  • 4.4.1 基于非DHT 查找方式的数据共享系统
  • 4.4.2 基于DHT 查找方式的数据共享系统
  • 4.4.3 混合查找方式的数据共享系统
  • 4.5 模拟实验
  • 4.6 小结
  • 第5章 结构化P2P 协议中的缓存计算模型
  • 5.1 引言
  • 5.2 相关工作
  • 5.3 基于DHT 的查询消息路由特征
  • 5.4 缓存计算模型
  • 5.4.1 缓存触发条件
  • 5.4.2 文件访问统计
  • 5.4.3 缓存更新算法
  • 5.4.4 推模式缓存与删除缓存
  • 5.5 模拟实验与分析
  • 5.6 讨论
  • 5.7 小结
  • 第6章 自适应负载均衡方法
  • 6.1 引言
  • 6.2 相关工作
  • 6.3 结点负载不平衡性
  • 6.3.1 基本概念
  • 6.3.2 查询随机均匀的负载分布
  • 6.3.3 Zipf 查询对结点负载分布影响
  • 6.4 自适应负载均衡方法
  • 6.4.1 局部负载统计
  • 6.4.2 逻辑链路迁移
  • 6.4.3 缓存
  • 6.5 模拟实验与分析
  • 6.6 其他问题
  • 6.7 小结
  • 第7章 PLC 负载均衡方法
  • 7.1 引言
  • 7.2 结点负载分布特征
  • 7.2.1 系统模型
  • 7.2.2 Zipf 查询对负载分布的影响
  • 7.3 PLC 负载均衡算法
  • 7.3.1 局部负载统计
  • 7.3.2 负载感知的被动式路由表维护算法
  • 7.3.3 基于概率的路由算法
  • 7.3.4 缓存
  • 7.4 模拟实验与分析
  • 7.5 讨论
  • 7.6 小结
  • 结论与展望
  • 参考文献
  • 致谢
  • 附录A 攻读学位期间发表的学术论文目录
  • 附录B 攻读学位期间参加的科研课题
  • 相关论文文献

    标签:;  ;  ;  ;  ;  ;  ;  

    结构化对等网络路由机制关键技术研究
    下载Doc文档

    猜你喜欢