删除或更新信息,请邮件至freekaoyan#163.com(#换成@)

一种基于分布式存储系统中多节点修复的节点选择算法

本站小编 Free考研考试/2022-01-01

刘佩1,2,蒋梓逸1,曹袖1,2
1(复旦大学计算机科学与技术学院 上海 201203); 2(网络信息安全审计与监控教育部工程研究中心(复旦大学) 上海 200433) (13210240020@fudan.edu.cn)
出版日期: 2018-07-01




Node Selection Algorithm During Multi-Nodes Repair Progress in Distributed Storage System

Liu Pei1,2, Jiang Ziyi1, Cao Xiu1,2
1(School of Computer Science and Technology, Fudan University, Shanghai 201203); 2(Engineering Research Center of Cyber Security Auditing and Monitoring (Fudan University), Ministry of Education, Shanghai 200433)
Online: 2018-07-01







摘要/Abstract


摘要: 在分布式存储系统中,如何优化失效数据的修复时间以保证系统的高可靠性,已引起了人们的广泛关注.近几年的研究发现修复过程中不同的节点选择机制对数据的再生时间产生很大的影响,已有工作提出了单节点失效场景下的节点选择SPSN (select provider select newcomer)算法,系统中往往存在多个节点同时修复的情况,此时,SPSN算法巨大的时空开销使得数据的再生时间不再最优.对已有真实系统的失效数据及原因进行统计;基于已有算法特点和修复模型,提出了具有更优的多节点选择B-WSJ(bandwidth based weak and strong judgement)算法.为了更好地描述算法,对带宽中节点的关系进行分类,算法利用节点关系分别实现了修复模型中目标节点的浅度和深度判断,并加入一定的预处理和剪枝策略,最终快速选择出具有较优带宽的节点集合.为了评估B-WSJ算法性能,使用Waxman算法产生网络拓扑,依据FTA(failure trace archive)网站所给的真实系统的节点失效模型进行多次实验,仿真结果表明:B-WSJ算法使得节点修复性能得到了很大的提升.






[1]李乾, 胡玉鹏, 叶振宇, 肖叶, 秦拯. 基于蚁群优化算法的纠删码存储系统数据更新方案[J]. 计算机研究与发展, 2021, 58(2): 305-318.
[2]张耀, 储佳佳, 翁楚良. 纠删码存储系统数据更新方法研究综述[J]. 计算机研究与发展, 2020, 57(11): 2419-2431.
[3]唐英杰,王芳,谢燕文. 纠删码存储系统中基于网络计算的高效故障重建方法[J]. 计算机研究与发展, 2019, 56(4): 767-778.
[4]李默涵,李建中. 数据时效性修复问题的求解算法[J]. 计算机研究与发展, 2015, 52(9): 1992-2001.
[5]孙 竞 余宏亮 郑纬民. 支持分布式存储删冗的相似文件元数据集合索引[J]. , 2013, 50(1): 197-205.
[6]廖 彬, 于 炯, 孙 华, 年 梅,. 基于存储结构重配置的分布式存储系统节能算法[J]. 计算机研究与发展, 2013, 50(1): 3-18.
[7]徐 云, 鄢冰峰, 陈国良,. 全部到全部组播的核管理机制及其算法研究[J]. , 2008, 45(6): -.
[8]王 晟 王 雪 毕道伟. 无线传感器网络动态节点选择优化策略[J]. , 2008, 45(1): 188-195.
[9]胡进锋, 洪春辉, 郑纬民,. 一种面向对象的Internet存储服务系统Granary[J]. , 2007, 44(6): 1071-1079.





PDF全文下载地址:

https://crad.ict.ac.cn/CN/article/downloadArticleFile.do?attachType=PDF&id=3735
相关话题/数据 系统 计算机 网络 优化

  • 领限时大额优惠券,享本站正版考研考试资料!
    大额优惠券
    优惠券领取后72小时内有效,10万种最新考研考试考证类电子打印资料任你选。涵盖全国500余所院校考研专业课、200多种职业资格考试、1100多种经典教材,产品类型包含电子书、题库、全套资料以及视频,无论您是考研复习、考证刷题,还是考前冲刺等,不同类型的产品可满足您学习上的不同需求。 ...
    本站小编 Free壹佰分学习网 2022-09-19
  • 基于信任的云服务系统多目标任务分配模型
    束柬,梁昌勇,徐健(合肥工业大学管理学院合肥230009)(优化与智能决策教育部重点实验室(合肥工业大学)合肥230009)(shujian7@163.com)出版日期:2018-06-01基金资助:国家自然科学基金项目(71331002,71271072,71601061);中央高校基本科研业务费 ...
    本站小编 Free考研考试 2022-01-01
  • 广义不完备多粒度标记决策系统的粒度选择
    吴伟志,杨丽,谭安辉,徐优红(浙江海洋大学数理与信息学院浙江舟山316022)(浙江省海洋大数据挖掘与应用重点实验室(浙江海洋大学)浙江舟山316022)(wuwz@zjou.edu.cn)出版日期:2018-06-01基金资助:国家自然科学基金项目(61573321,41631179,616024 ...
    本站小编 Free考研考试 2022-01-01
  • 通用数据质量评估模型及本体实现
    张晓冉,袁满(东北石油大学计算机与信息技术学院黑龙江大庆163318)(xiaoran9217@163.com)出版日期:2018-06-01基金资助:黑龙江省教育厅科技项目(12531059)GeneralDataQualityAssessmentModelandOntologicalImplem ...
    本站小编 Free考研考试 2022-01-01
  • 基于多通道卷积神经网络的中文微博情感分析
    陈珂1,梁斌2,柯文德1,许波1,曾国超11(广东石油化工学院计算机科学与技术系广东茂名525000);2(苏州大学计算机科学与技术学院江苏苏州215000)(chenke2001@163.com)出版日期:2018-05-01基金资助:国家自然科学基金项目(61272382,61672174);广 ...
    本站小编 Free考研考试 2022-01-01
  • 基于基准相似空间分布优化的偏好预测方法
    高岭1,2,高全力1,王海2,王伟2,杨康21(西安工程大学计算机科学学院西安710048);2(西北大学信息科学与技术学院西安710127)(gl@nwu.edu.cn)出版日期:2018-05-01基金资助:国家自然科学基金项目(61373146,61572401,61672426);陕西省教育 ...
    本站小编 Free考研考试 2022-01-01
  • 面向环境与需求不确定性的系统自适应决策
    杨卓群2,金芝1,31(高可信软件技术教育部重点实验室(北京大学)北京100871);2(中国科学院数学与系统科学研究院数学研究所北京100190);3(北京大学信息科学技术学院软件研究所北京100871)(zhuoqun.y@hotmail.com)出版日期:2018-05-01基金资助:国家“九 ...
    本站小编 Free考研考试 2022-01-01
  • 基于混合编码的FPGA系统配置文件压缩算法
    伍卫国1,2,王超辉1,2,王今雨1,聂世强1,胡壮11(西安交通大学电子与信息工程学院西安710049);2(国家数据广播工程技术研究中心(西安交通大学)西安710049)(wgwu@mail.xjtu.edu.cn)出版日期:2018-05-01基金资助:国家自然科学基金项目(61672423, ...
    本站小编 Free考研考试 2022-01-01
  • 一种支持数据去冗和扩容的多媒体文件云存储系统实现
    汪帅1,2,吕江花2,汪溁鹤2,吴继芳2,马世龙21(中国空间技术研究院北京100086);2(北京航空航天大学计算机学院北京100191)(buaashuai@buaa.edu.cn)出版日期:2018-05-01基金资助:国家自然科学基金项目(61300007)AMultimediaFileCl ...
    本站小编 Free考研考试 2022-01-01
  • 2018网络功能虚拟化专题前言
    徐明伟(清华大学)出版日期:2018-04-01Online:2018-04-01摘要/Abstract摘要:图灵奖得主ButlerLampson提出了一切皆可计算的概念,这一概念的实现不仅得益于数学模型的发展和计算、存储能力的提高,也离不开虚拟化的思想,它使得通用的计算 ...
    本站小编 Free考研考试 2022-01-01
  • 基于忆阻器交叉阵列的卷积神经网络电路设计
    胡飞,尤志强,刘鹏,邝继顺(嵌入式与网络计算省重点实验室(湖南大学)长沙410082)(湖南大学信息科学与工程学院长沙410082)(hu_qingfeng@126.com)出版日期:2018-05-01基金资助:国家自然科学基金项目(61472123);湖南省自然科学基金项目(2018JJ2064 ...
    本站小编 Free考研考试 2022-01-01