基于RDP编码的分布式存储系统磁盘故障修复

【摘要】建立维护可靠的、可扩展、低成本、高性能的分布式存储系统是云计算、大数据以及互联网公司应用后台基础的主要目标。分布式存储系统拥有着传统集中式存储所无法比拟的优势,然而,由于分布式存储系统组件的不可靠,运行过程中存在着种种异常情况,在各种异常中磁盘故障发生的概率最高,因此如何高效、透明地恢复磁盘故障,重构磁盘数据,是分布式存储系统所面临的重大问题。在容多错的分布式存储系统中存在着频繁的单节点故障,使得单节点故障数据修复问题成为研究的热点。基于纠删码的分布式存储系统数据修复在现阶段主要考虑的重要因素之一是从存活磁盘读取的数据量最优,因此本文的研究重点为以下两方面：一、研究分布式存储系统中单节点故障时的磁盘数据修复问题。通过针对分布式存储系统中存储介质的实际读取特性,设计了一种新型的基于磁盘连续读的故障修复方案。本文提出的基于连续读的修复方案在保持单磁盘故障修复过程数据量读取量最小的前提下,最大程度维持磁盘访问的连续性,减少磁盘的跳跃性读取,加快单磁盘故障的修复效率。本文针对RDP编码提出了相应的基于磁盘连续读的单节点故障修复方案,理论和实验均表明,该修复方案可以显著提高单节点故障修复的速率,减少修复时间。二、设计开发支持纠删码容错存储技术的分布式存储研究平台DSRP,该平台不仅可以类似普通文件系统对文件和目录的进行存取、创建、删除等操作,还能支持各种纠删码编解码容错机制、系统扩容以及系统重复数据删除等功能。该系统还可以为纠删码故障修复算法、重复数据删除技术以及系统磁盘扩容等算法提供实验验证平台和丰富的数据统计。
【作者】张燕；
【导师】许胤龙；
【作者基本信息】中国科学技术大学，计算机软件与理论，2014，硕士
【关键词】分布式存储系统；RDP编码；磁盘连续；单节点故障修复；

【参考文献】
[1]辛蕾.CRM、SCM与ERP系统的整合研究[J].信息技术与标准化,2004,10:40-43.
[2]曹彦星.基于视频图像的拼接技术研究与实现[D].东北大学,计算机系统结构,2010,硕士.
[3]王小君.论董事长的法律地位[D].华东政法学院,法律,2004,硕士.
[4]李涛,张合新,孟飞.混合时滞不确定中立系统鲁棒稳定的时滞分割方法[J].控制与决策,2011,01:106-110.
[5]郭莉.水权交易与农地流转协同运行的机理研究[D].兰州大学,区域经济学,2013,硕士.
[6]李烁.论我国民事审前程序的构建[D].中国政法大学,法律,2013,硕士.
[7]季陵辉.非法吸收公众存款罪的司法认定研究[D].安徽大学,法律,2012,硕士.
[8]姜磊,邓振波,殷月红,李熊,朱丽杰,王越,滕枫.TBPe与MEH-PPV共掺杂的有机电致发光器件的优化研究[J].发光学报,2014,02:232-237.
[9]张新华.海德堡K系列胶印机故障及排除(一)[J].云南印刷.1995(02)
[10]倪廷宝.古文翻译中直译、意译及术语的处理[D].复旦大学,英语笔译,2012,硕士.
[11]樊秀月.甲状腺乳头状癌颈部中央组淋巴结转移的相关因素及清扫方式的探讨[D].广西医科大学,胃肠腺体外科（专业学位）,2013,硕士.
[12]张钦,王锡凡,别朝红,王建学.电力市场下直接负荷控制决策模型[J].电力系统自动化,2010,09:23-28.
[13]白希希.新型抗菌肽的设计与研究—生物活性及与磷脂膜相互作用[D].郑州大学,药物分析,2013,硕士.
[14]王丽.襄阳市尹集乡社区治理研究[D].重庆大学,行政管理,2014,硕士.
[15]熊锋.基于不确定感知结构电网网络控制系统研究[J].电子制作,2015,03:41.
[16]王河.兰州HS百货有限公司销售管理研究[D].西安理工大学,工商管理,2004,硕士.
[17]易鸣.高师钢琴普修教材分析比较及对策研究[D].湖南师范大学,音乐学,2012,硕士.
[18]宋利文.粗饲料品质对泌乳奶山羊及奶牛乳腺摄取利用脂肪酸的影响及机制[D].内蒙古农业大学,动物营养与饲料科学,2014,博士.
[19]秦宇.小学诗词教学的美育意蕴研究[D].山西师范大学,教育学原理,2013,硕士.
[20]郗笃斌.以战略为导向的TAFK公司高管绩效管理研究[D].西北大学,工商管理（专业学位）,2012,硕士.
[21]高鸿.“数字故事”在初中一年级语文阅读教学中的实践研究[D].宁夏大学,现代教育技术（专业学位）,2014,硕士.
[22]李兴旺.2D/3D多震相菲涅耳体射线同时反演成像方法技术研究[D].长安大学,固体地球物理学,2014,硕士.
[23]杜乐.运动对二噁英染毒大鼠免疫毒性的影响研究[D].北京体育大学,社会体育指导,2013,硕士.
[24]张晶晶.情感教育在高中英语教学中的应用研究[D].信阳师范学院,学科教学,2014,硕士.
[25]刘友斌.一种开放可重用的计算机学科实验平台研究[D].华中科技大学,计算机技术,2013,硕士.
[26]龙朝辉.广东省电子废弃物治理的政府作用研究[D].华南理工大学,行政管理,2014,硕士.
[27]王培震.西北内陆河流域人口密度分布特征与空间化研究[D].西北师范大学,人文地理学,2013,硕士.
[28]徐恺俐,张云霞,陈矞欣.媒介的差异化传播[J].商,2013,02:141-142.
[29]周脉乐.贝塞尔齿轮高速水稻钵苗移栽机构的机理分析与优化设计[D].浙江理工大学,机械设计及理论,2014,硕士.
[30]唐华.《我在练习书法呢！》教学设计[D].安阳师范学院,汉语国际教育（专业学位）,2014,硕士.
[31]倪东霞.TiCl_3处理对TiO_2基染料敏化太阳能电池光电性能的影响[D].武汉理工大学,2011.
[32]马新野.不同气候带城市化效应的差异和城市扩展对区域气候的影响[D].南京大学,气象学,2014,博士.
[33]褚鹏.基于Android移动平台的图书借阅与管理系统设计与实现[D].华中师范大学,电子与通信工程,2014,硕士.
[34]林敏.战后日元升值对日本经济的影响[D].东北财经大学,国际贸易学,2012,硕士.
[35]戴路.A8音乐集团有限公司品牌建设的案例研究[D].兰州大学,工商管理（专业学位）,2013,硕士.
[36]石昊天.网球文化对大学校园体育文化的影响[D].辽宁师范大学,体育教育训练,2012,硕士.
[37]梁文娟.论联合限制竞争行为的法律控制[D].北方工业大学,法律,2013,硕士.
[38]张越男.基于岩石吸水特性的气体钻井最小注气量研究[D].东北石油大学,油气井工程,2013,硕士.
[39]张晓君.地铁隧道下穿既有铁路沉降控制技术研究[D].西安科技大学,建筑与土木工程,2013,硕士.
[40]胡歆婷.商业银行理财产品监管的价值选择和制度构建[D].上海大学,法学理论,2014,硕士.
[41]徐莎莎.战后二十年言论的轨迹[D].南京大学,日本语言文学,2013,硕士.
[42]黄佳佳,柳景青,王薇,陈婷婷,胡宝兰,刘轲.实际供水管网管材和余氯浓度对生物膜的影响[J].科技通报,2014,09:216-222.
[43]章梦.舞蹈艺术中静态造型的艺术美[D].南京航空航天大学,音乐学,2013,硕士.
[44]琚鹏飞.当前我国高校社会主义核心价值观教育探析[D].山西财经大学,马克思主义中国化研究,2014,硕士.
[45]盛路.房地产上市公司CEO背景特征与企业成长性实证研究[D].浙江财经学院,企业管理,2013,硕士.
[46]杨欣斌,孙京诰,陈霁威,黄道.一种高效并行关联规则挖掘新算法[J].华东理工大学学报,2003,03:295-298.
[47]陈昭.虚拟现实技术在犯罪现场重建中的研究与应用[D].吉林大学,软件工程,2014,硕士.
[48]李勇.心理社会因素与糖尿病的相关研究[D].苏州大学,精神病学与精神卫生学,2003,硕士.
[49]王梦影.中国商业银行高管薪酬激励机制研究及设计[D].复旦大学,金融学,2012,硕士.
[50]刘丽萍.WTO框架下的中美农业比较研究[D].外交学院,国际关系,2004,硕士.