一种P2P网络存储系统的设计与实现

一种P2P网络存储系统的设计与实现

论文摘要

随着P2P计算模式的兴起、网络带宽的大幅增加和Internet端系统计算力的迅速增强,原先被忽视的终端系统成为了一种宝贵的资源。如何充分利用这端系统资源,在高动态的P2P网络环境中构建大规模、高可扩展、高可靠、高的分布式存储系统,成为近年来研究的热点之一。在本篇论文中,首先讨论和总结了分布式存储的发展历史和现状,并在对P2P技术的研究现状进行了系统、全面的分析和总结的基础上,设计了一种基于P2P的分层次存储系统SmartHSS(Smart Hierarchical Store System Based-P2P)。SmartHSS既吸取了结构化网络的优点,同时利用了混合非集中式的优点来避免结构化网络的缺点。SmartHSS采用两层网络结构,第一层是目录服务器DSP(Directory Service Provider)组成的DHT覆盖网络,其作用是记录用户节点的信息和行为以进行集中管理与控制;第二层是用户节点组成的客户端层,用来存储用户的数据。采用这种结构的好处是:引入服务器易于管理与控制用户节点,同时采用DHT网络来组织服务器,可以避免单点失效等缺点。具体关键技术如下:首先,本文在研究了现有DHT路由算法的基础上,设计了一个分布式哈希表(Distributed Hash Table,简称DHT)服务,为SmartHSS提供了分布式可靠存储和快速查询平台。然后,本文考察了当前的数据持久存储方案,根据SmartHSS的特点,提出了一个适合SmartHSS的数据持久存储方案SmartDDS(Smart Data Durable Storage)。接着,在总结了常见内容存储可靠性保证机制的优缺点后,考虑到SmartHSS的实际需求,实现了一套内容失效恢复机制SmartCRM(Smart Content Recovery Mechanism)。SmartCRM在SmartDHT上维护系统全局状态,采用“软状态”探测内容丢失,并运用peer to peer(简称P2P)技术互传恢复内容。最后,为了能够高效地实现SmartHSS的各个服务器模块,本文在Linux2.6 epoll高性能IO事件通知机制的基础上,采用面向对象的思想,建立了一个在复杂业务逻辑中能处理与多种通信实体交互的高性能服务器架构SmartESF(Smart Efficient Server Framework)。

论文目录

  • 摘要
  • ABSTRACT
  • 第一章 引言
  • 1.1 课题研究背景
  • 1.1.1 Internet发展现状
  • 1.1.2 Internet存储技术面临新的挑战
  • 1.2 本文的研究内容
  • 1.3 全文结构
  • 第二章 P2P及存储技术介绍
  • 2.1 P2P技术简介
  • 2.1.1 P2P定义
  • 2.1.2 P2P计算模式
  • 2.1.3 P2P网络
  • 2.1.4 BT技术介绍
  • 2.2 分布式存储系统简介
  • 2.2.1 网络存储
  • 2.2.2 集群存储技术
  • 2.2.3 分布式文件系统
  • 2.2.4 网格存储技术
  • 2.3 P2P存储系统简介
  • 2.3.1 P2P存储系统
  • 2.3.2 P2P存储系统分类
  • 2.4 P2P存储技术的研究现状
  • 2.4.1 数据冗余方案
  • 2.4.2 数据分发方案
  • 2.4.3 错误检测方案
  • 2.4.4 冗余数据维护
  • 2.5 小结
  • 第三章 P2P存储系统-SmartHSS
  • 3.1 SmartHSS系统结构
  • 3.2 SmartHSS文件组织
  • 3.2.1 节点ID、用户ID与文件ID
  • 3.2.2 目录空间
  • 3.2.3 元文件
  • 3.2.4 实体文件
  • 3.2.5 本节小结
  • 3.3 SmartHSS典型文件操作
  • 3.3.1 文件加入
  • 3.3.2 文件搜索
  • 3.3.3 文件读取
  • 3.3.4 文件删除
  • 3.4 总结
  • 第四章 分布式哈希表服务-SmartDHT
  • 4.1 DHT概述
  • 4.2 DHT服务
  • 4.2.1 OpenDHT
  • 4.2.2 SmartDHT
  • 4.3 总结
  • 第五章 数据持久存储-SmartDDS
  • 5.1 引言
  • 5.2 SmartDDS的设计
  • 5.2.1 SmartDDS的数据冗余方案
  • 5.2.2 SmartDDS的数据分发方案
  • 5.2.3 SmartDDS的错误检测方案
  • 5.2.4 SmartDDS的数据冗余维护方案
  • 5.3 总结
  • 第六章 内容恢复机制-SmartCRM
  • 6.1 内容可靠性保证和恢复技术概述
  • 6.2 SmartCRM的设计目标
  • 6.3 SmartCRM的假设
  • 6.4 SmartCRM 的设计
  • 6.5 SmartCRM的流程
  • 6.6 总结
  • 第七章 高性能服务器架构-SmartESF
  • 7.1 网络服务器架构概述
  • 7.2 SmartESF的设计考虑
  • 7.3 SmartESF的IO事件驱动机制
  • 7.4 SmartESF与多种通信实体交互的方案
  • 7.5 SmartESF处理复杂业务逻辑的方案
  • 7.6 SmartESF小结
  • 7.7 SmartESF在DSP中的运用
  • 7.7.1 DSP功能和模块划分
  • 7.7.2 本地信息表操作模块的实现
  • 7.7.3 DSP中其它模块的实现
  • 7.8 SmartHSS其它模块的实现
  • 7.9 总结
  • 第八章 SmartHSS测试与性能分析
  • 8.1 功能测试
  • 8.1.1 典型文件操作测试
  • 8.1.2 功能测试总结
  • 8.2 性能测试
  • 8.2.1 SmartDDS的性能测试和参数分析
  • 8.2.2 SmartCRM性能测试
  • 第九章 总结和展望
  • 9.1 SmartHSS的特点
  • 9.2 SmartHSS的展望
  • 致谢
  • 参考文献
  • 攻读硕士期间取得的研究成果
  • 相关论文文献

    • [1].P2P负面口碑特征属性挖掘与风险知识识别模型[J]. 武汉纺织大学学报 2019(06)
    • [2].P2P网络贷款监管的不足与完善[J]. 法制与社会 2019(36)
    • [3].P2P投资经验与甄别违约风险的能力——基于学习的视角[J]. 统计研究 2019(12)
    • [4].P2P网贷非法集资风险的法律规制研究[J]. 甘肃金融 2019(12)
    • [5].论网络非法集资犯罪侦防对策——以P2P网贷平台为视角[J]. 湖南警察学院学报 2019(06)
    • [6].P2P现状与大学生网贷的分析探究[J]. 教育教学论坛 2020(05)
    • [7].P2P网络借贷平台企业价值评估研究[J]. 合作经济与科技 2020(06)
    • [8].行为经济学视角下的P2P投资者行为分析[J]. 青海金融 2020(01)
    • [9].试论“监管沙盒”在规范我国P2P网络贷款平台应用路径选择[J]. 全国流通经济 2020(01)
    • [10].P2P融资平台下庞氏骗局的风险与防范[J]. 中国商论 2020(08)
    • [11].我国P2P发展困境分析——基于信息不对称视角[J]. 湖北科技学院学报 2020(01)
    • [12].认证方式对P2P的信用风险影响的有效性分析——基于“人人贷”经验数据[J]. 宿州学院学报 2020(02)
    • [13].P2P网络借贷平台财务风险预警体系研究[J]. 广西质量监督导报 2020(03)
    • [14].区块链在P2P行业征信体系的应用[J]. 科技资讯 2020(11)
    • [15].基于区块链技术的智能制造的P2P协同设计[J]. 机械设计与研究 2020(02)
    • [16].P2P网贷平台非法集资犯罪的刑法规制[J]. 法制博览 2020(15)
    • [17].基于P2P网贷行业失信危机征信系统应用问题探究[J]. 市场研究 2020(03)
    • [18].基于投资者结构的P2P网贷项目评估模型研究[J]. 安徽理工大学学报(社会科学版) 2020(02)
    • [19].P2P架构下环型结构文件热备份系统设计[J]. 软件导刊 2020(06)
    • [20].在营P2P网贷机构接入征信系统问题探讨[J]. 征信 2020(06)
    • [21].P2P网络借贷风险测度及防范[J]. 现代营销(下旬刊) 2020(07)
    • [22].蜂窝网络中P2P通信的关键技术研究[J]. 信息与电脑(理论版) 2020(13)
    • [23].基于P2P网贷行业现状的互联网金融监管未来发展趋势研究[J]. 现代商贸工业 2019(03)
    • [24].由P2P爆雷事件反思互联网金融的监管漏洞[J]. 现代营销(经营版) 2019(02)
    • [25].P2P网贷投资者特征与风险分析[J]. 广西质量监督导报 2019(03)
    • [26].我国互联网金融的风险及前景分析——以P2P网贷为例[J]. 现代营销(下旬刊) 2019(06)
    • [27].P2P平台下的“校园贷”问题研究[J]. 法制博览 2019(20)
    • [28].对互联网金融行业P2P管理问题的探讨[J]. 现代营销(下旬刊) 2019(07)
    • [29].基于P2P网络的计算机辅助教学系统[J]. 信息与电脑(理论版) 2019(21)
    • [30].P2P技术在云平台内容分发中的应用[J]. 信息与电脑(理论版) 2019(22)

    标签:;  ;  ;  

    一种P2P网络存储系统的设计与实现
    下载Doc文档

    猜你喜欢