云存储中数据块资源分布及服务器效能优化问题研究

云存储中数据块资源分布及服务器效能优化问题研究

论文摘要

云存储的概念是随着云计算的发展而出现的。本文对云存储机制进行研究,分析了云存储系统中的数据存储方式及数据的访问方式。在云存储环境当中,数据都是以多备份、固定大小数据块的形式存储在云集群服务器中,而所有数据块都是以文件的形式存储在Linux环境下。系统中有一个中心主节点,所有对数据块的操作都是通过它进行协调。本文所做的主要工作包括:通过对云存储环境的网络拓扑结构和基于地理位置信息的各服务器位置关系的分析,得到数据块集合在云环境下层次化网络拓扑结构分布图。通过对数据块集合结构分布图的分析,提出了云存储环境中存储资源的风险评估模型,并给出了具体的风险计算算法和实例分析,为在云存储环境中对基于存储资源的风险研究提供了理论依据。针对云存储环境进行系统建模,形式化数据块资源和服务器资源的一些属性,分析集合划分问题在资源分布中的重要性并给出了在集合划分问题中使用方差衡量问题目标的数学证明。通过对云存储系统数据块资源属性的研究,对云存储系统中数据块资源的分布问题进行数学建模,并提出基于云集群服务器性能的数据块分布算法LPT-IGA.LPT-IGA算法是在LPT算法的基础上改进的遗传算法。算法首先改进遗传算法初始种群的产生,使用LPT算法生成问题的许多解,然后使用基于适应度值的轮盘赌选择算法选择得到遗传算法的初始种群;其次,对编码进行改进,所有编码的方向都是按照数据块资源的被访问频率(热度)由大到小的方向编码;最后,对交叉操作和变异操作提出一种随机地按照编码方向逐渐增大概率的改进方法进行交叉和变异操作。针对云集群中数据块服务器效能的优化问题,首先对云集群环境当中的服务器效能最大化问题进行数学建模,在此数学模型的基础上给出FFD-LPT的近似算法。FFD-LPT算法改进了DLPT算法二分搜索的上界,使算法的搜索空间较小。

论文目录

  • 摘要
  • Abstract
  • 插图索引
  • 附表索引
  • 第1章 绪论
  • 1.1 研究背景
  • 1.2 本文的主要工作
  • 1.3 本文组织结构
  • 第2章 相关研究
  • 2.1 云存储概述
  • 2.1.1 云存储出现的背景
  • 2.1.2 云存储与云计算关系
  • 2.1.3 云存储的结构模型
  • 2.2 云存储系统
  • 2.2.1 Google云存储
  • 2.2.2 Yahoo云存储
  • 2.3 云存储产品介绍
  • 2.3.1 国外云存储服务
  • 2.3.2 国内云存储服务
  • 2.4 小结
  • 第3章 云环境中存储资源的风险模型
  • 3.1 基于位置的云存储数据风险理论
  • 3.1.1 云存储环境中数据资源的风险分析
  • 3.1.2 基于地理位置的数据风险理论
  • 3.2 云存储环境拓扑结构的形式化
  • 3.2.1 云存储典型的拓扑结构
  • 3.2.2 云存储拓扑结构的形式化
  • 3.3 存储资源的风险计算模型
  • 3.3.1 存储资源风险模型
  • 3.3.2 风险计算算法
  • 3.3.3 实例分析
  • 3.4 小结
  • 第4章 云存储中数据块资源分布及服务器效能优化问题
  • 4.1 云存储环境系统建模
  • 4.1.1 负载均衡策略介绍
  • 4.1.2 云存储环境形式化
  • 4.1.3 集合划分问题
  • 4.2 云存储环境中数据块分布问题
  • 4.2.1 问题描述
  • 4.2.2 数学模型
  • 4.2.3 问题分析
  • 4.2.4 遗传算法
  • 4.2.5 LPT-IGA算法
  • 4.2.6 算法复杂度分析
  • 4.2.7 实验仿真
  • 4.3 存储环境中数据块服务器效能优化问题
  • 4.3.1 问题描述
  • 4.3.2 数学模型
  • 4.3.3 问题分析
  • 4.3.4 FFD-LPT近似算法
  • 4.3.5 实验仿真
  • 4.4 小结
  • 结论
  • 参考文献
  • 致谢
  • 附录A (攻读硕士期间所发表论文目录)
  • 附录B (攻读硕士期间参加的科研项目)
  • 相关论文文献

    • [1].一种数据块相关标记码的测试数据压缩方法[J]. 计算机工程与应用 2011(13)
    • [2].一种基于变长数据块相关性统计的测试数据压缩和解压方法[J]. 电子学报 2008(02)
    • [3].基于热点数据块的动态副本调整策略[J]. 计算机测量与控制 2018(12)
    • [4].分布式文件系统数据块聚类存储节能策略[J]. 计算机应用 2015(02)
    • [5].基于西门子SCOUT的FB数据块的编写与应用[J]. 信息记录材料 2018(04)
    • [6].数据块相容性统计的测试数据压缩方案[J]. 计算机工程与应用 2013(22)
    • [7].数据块合并技术在测试数据压缩中的应用[J]. 科协论坛(下半月) 2012(04)
    • [8].基于纠删码技术的云存储数据块部署方案[J]. 信息与控制 2019(02)
    • [9].Oracle坏块的研究分析与处理[J]. 数字通信世界 2017(02)
    • [10].基于部分数据块复用的SoC测试数据压缩方法[J]. 电子测量与仪器学报 2010(05)
    • [11].基于重复抽样Bootstrap方法的移动数据块算法的研究[J]. 太原科技大学学报 2009(03)
    • [12].基于时间序列的PDM文件数据块分布算法[J]. 计算机工程与设计 2015(12)
    • [13].基于延时相乘和同步数据块累加的GPS捕获算法[J]. 科学技术与工程 2012(36)
    • [14].有限空间下的自治移动云存储协议[J]. 计算机科学与探索 2017(02)
    • [15].云计算环境中HDFS数据块存储策略研究[J]. 电脑知识与技术 2020(26)
    • [16].云存储中的ORAM研究综述[J]. 计算机科学 2019(S2)
    • [17].基于数据块级迁移策略的设计与实现[J]. 计算机工程与设计 2016(07)
    • [18].一种基于布隆过滤的快速冗余数据块发现算法[J]. 中南民族大学学报(自然科学版) 2016(03)
    • [19].Oracle中表数据的存储原理浅析[J]. 信息系统工程 2009(07)
    • [20].云数据持有性审计研究与进展[J]. 计算机科学 2017(06)
    • [21].ORACLE SQL性能调整[J]. 科技创新导报 2009(15)
    • [22].一种多特征数据块混合的ARINC429总线测试技术[J]. 中国科技信息 2017(24)
    • [23].利用少数相关位的SoC测试数据压缩方法[J]. 电子测量与仪器学报 2013(01)
    • [24].XTrim:一种基于XML Schema和微型数据块优化的XML压缩方法[J]. 北京大学学报(自然科学版) 2010(05)
    • [25].浅谈STEP7中FC与FB的区别及应用[J]. 化工管理 2016(11)
    • [26].适应中国海岸空间形态的海籍影像数据块编码研究[J]. 海洋学报(中文版) 2012(01)
    • [27].一种改进的基于信号状态矢量的循环数据块构造[J]. 电子测量与仪器学报 2019(06)
    • [28].共享集群基于HDFS的数据块密度调度策略[J]. 计算机科学 2017(S2)
    • [29].基于STAR码的HDFS失效数据恢复研究[J]. 南开大学学报(自然科学版) 2014(01)
    • [30].面向内存云的数据块索引方法[J]. 计算机应用 2016(05)

    标签:;  ;  ;  ;  ;  ;  

    云存储中数据块资源分布及服务器效能优化问题研究
    下载Doc文档

    猜你喜欢