删除或更新信息,请邮件至freekaoyan#163.com(#换成@)

分布式监测系统中的重复元素检测机制

本站小编 Free考研考试/2022-01-01

陆乐1,孙玉娥2,3,黄河1,3,汪润枝1,曹振1
1( 苏州大学计算机科学与技术学院 江苏苏州 215131);2( 苏州大学轨道交通学院 江苏苏州 215137);3( 中国科学技术大学苏州研究院 江苏苏州 215123) (20175227062@stu.suda.edu.cn)
出版日期: 2020-05-01


基金资助:国家自然科学基金面上项目(61672369,61873177,61572342)

Detection of Persistent Elements in Distributed Monitoring System

Lu Le1, Sun Yu’e 2,3, Huang He 1,3, Wang Runzhi1, Cao Zhen1
1( School of Computer Science and Technology, Soochow University, Suzhou, Jiangsu 215131);2( School of Rail Transportation, Soochow University, Suzhou, Jiangsu 215137);3( Suzhou Institute for Advanced Study, University of Science and Technology of China, Suzhou, Jiangsu 215123)
Online: 2020-05-01


Supported by:This work was supported by the General Program of the National Natural Science Foundation of China (61672369, 61873177, 61572342).




摘要/Abstract


摘要: 重复元素检测在分布式入侵检测、公众兴趣发掘以及交通状况估计等领域有着重要的应用.现有的检测模型存在误报漏报、通信开销大和局限性大等问题,难以满足分布式应用场景的需要.针对这些问题,以最小化通信开销为目标,设计了一个适用于分布式监测系统的重复元素检测机制.首先,机制主要通过监测器与协调器间多轮次的压缩数据传输筛去了大量无关元素,从而降低了整体通信开销;接着,借助理论推导调整参数保证每一轮筛选的必要性及效果的最优化,并结合了可扩展布隆过滤器和持续流量估计等技术,使机制在面对不同的元素分布状况时,都可以取得良好效果;最后,通过仿真实验结果验证了所设计机制的有效性.






[1]杨帆, 张鹏, 王展, 元国军, 安学军. 基于在网计算加速的拜占庭容错算法[J]. 计算机研究与发展, 2021, 58(1): 164-177.
[2]马卿云, 季航旭, 赵宇海, 毛克明, 王国仁. 一种分布式异构带宽环境下的高效数据分区方法[J]. 计算机研究与发展, 2020, 57(12): 2683-2693.
[3]徐志伟,曾琛,朝鲁,彭晓晖. 面向控域的体系结构:一种智能万物互联的体系结构风格[J]. 计算机研究与发展, 2019, 56(1): 90-102.
[4]任彦冰,李兴华,刘海,程庆丰,马建峰. 基于区块链的分布式物联网信任管理方法研究[J]. 计算机研究与发展, 2018, 55(7): 1462-1478.
[5]张铁赢, 黄贵, 章颖强, 王剑英, 胡炜, 赵殿奎, 何登成. X-DB:软硬一体的新型数据库系统[J]. 计算机研究与发展, 2018, 55(2): 319-326.
[6]刘红燕,咸鹤群,鲁秀青,侯瑞涛,高原. 基于用户定义安全条件的可验证重复数据删除方法[J]. 计算机研究与发展, 2018, 55(10): 2134-2148.
[7]王恺璇,李宇溪,周福才,王权琦. 面向多关键字的模糊密文搜索方法[J]. 计算机研究与发展, 2017, 54(2): 348-360.
[8]杨雪,董红斌,滕旭阳. 一种视频广告的预算约束限制拍卖机制[J]. 计算机研究与发展, 2017, 54(2): 415-427.
[9]蒋军强,林亚平,谢国琪,张世文. 时间约束的异构分布式系统工作流能耗优化算法[J]. 计算机研究与发展, 2016, 53(7): 1503-1516.
[10]李钦,朱延超,刘轶,钱德沛. 基于YARN集群的计算加速部件扩展支持[J]. 计算机研究与发展, 2016, 53(6): 1263-1270.
[11]王彦士,王伟, 刘朝辉, 魏峻, 黄涛. 支持透明集成的数据缓存机制[J]. 计算机研究与发展, 2015, 52(4): 907-917.
[12]崔星灿,禹晓辉,刘洋,吕朝阳. 分布式流处理技术综述[J]. 计算机研究与发展, 2015, 52(2): 318-332.
[13]赵刚, 况晓辉, 李津, 郑纬民,. 一种基于权值的大规模分布式系统结构脆弱性分析算法[J]. , 2011, 48(5): 906-912.
[14]高崇南 余宏亮 郑纬民. 基于日志的系统任务模型推理工具及其应用[J]. , 2010, 47(8): 1490-1496.
[15]朱 萍 阳富民 涂 刚. 基于被动副版本优先级提高策略的分布式实时容错调度[J]. , 2010, 47(11): 2003-2010.





PDF全文下载地址:

https://crad.ict.ac.cn/CN/article/downloadArticleFile.do?attachType=PDF&id=4185
相关话题/计算机 系统 数据 江苏 通信

  • 领限时大额优惠券,享本站正版考研考试资料!
    大额优惠券
    优惠券领取后72小时内有效,10万种最新考研考试考证类电子打印资料任你选。涵盖全国500余所院校考研专业课、200多种职业资格考试、1100多种经典教材,产品类型包含电子书、题库、全套资料以及视频,无论您是考研复习、考证刷题,还是考前冲刺等,不同类型的产品可满足您学习上的不同需求。 ...
    本站小编 Free壹佰分学习网 2022-09-19
  • 2020数据驱动网络专题前言
    崔勇1,马华东2,陈凯3,俞敏岚4,刘洪强51(清华大学北京100084);2(北京邮电大学北京100876);3(香港科技大学香港999077);4(哈佛大学美国马萨诸塞州剑桥市02138);5(阿里巴巴杭州310023)出版日期:2020-04-01Online:2020-04-01摘要/Abs ...
    本站小编 Free考研考试 2022-01-01
  • 面向低维工控网数据集的对抗样本攻击分析
    周文1,3,张世琨2,丁勇4,陈曦51(北京大学软件与微电子学院北京100871);2(北京大学软件工程国家工程研究中心北京100871);3(中国航空油料集团有限公司北京100088);4(鹏城实验室广东深圳518000);5(中国软件测评中心北京100048)(zhou.wen@pku.edu. ...
    本站小编 Free考研考试 2022-01-01
  • 公交数据驱动的城市车联网转发机制
    唐晓岚,顼尧,陈文龙(首都师范大学信息工程学院北京100048)(tangxl@cnu.edu.cn)出版日期:2020-04-01基金资助:国家重点研发计划项目(2018YFB1800403);国家自然科学基金项目(61872252);北京市自然科学基金项目(4202012);北京市教委科技计划一 ...
    本站小编 Free考研考试 2022-01-01
  • 面向云数据中心多语法日志通用异常检测机制
    张圣林1,李东闻1,孙永谦1,孟伟彬2,3,4,张宇哲1,张玉志1,刘莹3,4,裴丹2,41(南开大学软件学院天津300350);2(清华大学计算机科学与技术系北京100084);3(清华大学网络科学与网络空间研究院北京100084);4(北京信息科学与技术国家研究中心北京100084)(zhang ...
    本站小编 Free考研考试 2022-01-01
  • GitHub中软件生态系统的演化
    齐晴,曹健,刘妍岑(上海交通大学电子信息与电气工程学院计算机系上海201100)(qi_ng616@sjtu.edu.cn)出版日期:2020-03-01基金资助:国家重点研发计划项目(2018YFB1003800)TheEvolutionofSoftwareEcosysteminGitHubQiQ ...
    本站小编 Free考研考试 2022-01-01
  • 基于用户级融合I/O的Key-Value存储系统优化技术研究
    安仲奇1,张云尧1,2,邢晶1,霍志刚1,21(计算机体系结构国家重点实验室(中国科学院计算技术研究所)北京100190);2(中国科学院大学计算机与控制工程学院北京100049)(anzhongqi@ncic.ac.cn)出版日期:2020-03-01基金资助:国家重点研发计划项目(2018YFC ...
    本站小编 Free考研考试 2022-01-01
  • 2020大数据与智能存储系统前沿技术专题前言
    舒继武1,王意洁21(清华大学北京100084);2(国防科技大学长沙410073)出版日期:2020-02-01Online:2020-02-01摘要/Abstract摘要:近年来,随着国家和社会信息化发展的不断加速,对信息存储提出了越来越高的要求.一方面,大数据时代,数据存储的规模和处理需求越来 ...
    本站小编 Free考研考试 2022-01-01
  • 一种分布式持久性内存文件系统的一致性机制
    陈波1,2,陆游游2,蔡涛1,陈游旻2,屠要峰3,舒继武21(江苏大学计算机科学与通信工程学院江苏镇江212013);2(清华大学计算机科学与技术系北京100084);3(中兴通讯股份有限公司南京210012)(chenbo_9312@163.com)出版日期:2020-03-01基金资助:国家重点 ...
    本站小编 Free考研考试 2022-01-01
  • 基于冲突检测的高吞吐NVM存储系统
    蔡涛,王杰,牛德姣,刘佩瑶,陈福丽(江苏大学计算机科学与通信工程学院江苏镇江212013)(caitao@ujs.edu.cn)出版日期:2020-02-01基金资助:国家自然科学基金项目(61806086);国家重点研发计划项目(2018YFB0804204);中国博士后科学基金项目(2016M6 ...
    本站小编 Free考研考试 2022-01-01
  • 新型存储设备上重复数据删除指纹查找优化
    何柯文,张佳辰,刘晓光,王刚(南开大学计算机学院天津300350)(天津市网络与数据安全技术重点实验室(南开大学)天津300350)(hekw@nbjl.nankai.edu.cn)出版日期:2020-02-01基金资助:国家自然科学基金项目(U1833114,61872201,61702521,6 ...
    本站小编 Free考研考试 2022-01-01