删除或更新信息,请邮件至freekaoyan#163.com(#换成@)

地球科学大规模并行应用的重叠存储优化

本站小编 Free考研考试/2022-01-01

陈璟锟,杜云飞
(国家超级计算广州中心(中山大学) 广州 510006) (jingkun.chen@nscc-gz.cn)
出版日期: 2019-04-01


基金资助:国家自然科学基金项目(61520106005,61761136014);国家重点研发计划项目(2017YFB1010000)

An Overlap Store Optimization for Large-Scale Parallel Earth Science Application

Chen Jingkun Du Yunfei
(National Supercomputer Center in Guangzhou (Sun Yat-sen University), Guangzhou 510006)
Online: 2019-04-01







摘要/Abstract


摘要: 存储是地球科学类软件的重要组成部分,周期性输出中间态和检查点会带来大量的访存操作,不恰当的访存设计会严重影响软件在大规模计算时的性能表现.针对地球科学类软件的存储问题,从软件层面提出一个重叠存储优化方法,通过设置额外的I/O进程隐藏输出过程.该重叠存储优化主要有3个优势:1)将输出和计算操作重叠在一起,实现了输出的重叠化和隐藏化;2)抑制了收集通信的开销,突破了收集操作的通信带宽瓶颈和内存限制;3)能容易地使用各种高级并行输出库函数.利用重叠存储优化了天河二号上的WRF,ROMS_AGRIF,GRAPES,并完成了性能测试.结果表明:经过存储优化后,程序的峰值性能都获得了显著的提升.还讨论了在固定总进程数下,计算进程和I/O进程数的最佳比例是多少.优化后的程序与原版相比,模式专家只需要在配置文件额外设置2个新变量即可使用,十分易于学习.






[1]程大宁, 张汉平, 夏粉, 李士刚, 袁良, 张云泉. AccSMBO:一种基于超参梯度和元学习的SMBO加速算法[J]. 计算机研究与发展, 2020, 57(12): 2596-2609.
[2]王真,江建慧,陈乃金,卢光明,张颖. BTI作用下三因素对集成电路软差错率的影响[J]. 计算机研究与发展, 2018, 55(5): 1108-1116.
[3]何盼,谭春,袁月,吴开贵. 冗余及监控混合策略的优化配置算法研究[J]. 计算机研究与发展, 2016, 53(3): 682-696.
[4]张必英, 陈红松, 崔刚, 傅忠传. 温度约束多核处理器最大稳态吞吐量分析[J]. 计算机研究与发展, 2015, 52(9): 2083-2093.





PDF全文下载地址:

https://crad.ict.ac.cn/CN/article/downloadArticleFile.do?attachType=PDF&id=3908
相关话题/优化 计算 计算机 软件 广州

  • 领限时大额优惠券,享本站正版考研考试资料!
    大额优惠券
    优惠券领取后72小时内有效,10万种最新考研考试考证类电子打印资料任你选。涵盖全国500余所院校考研专业课、200多种职业资格考试、1100多种经典教材,产品类型包含电子书、题库、全套资料以及视频,无论您是考研复习、考证刷题,还是考前冲刺等,不同类型的产品可满足您学习上的不同需求。 ...
    本站小编 Free壹佰分学习网 2022-09-19
  • 一种基于斯格明子介质的高效存内计算框架
    刘必成,顾海峰,陈铭松,谷守珍,陈闻杰(上海市高可信计算重点实验室(华东师范大学)上海200062)(51151500030@stu.ecnu.edu.cn)出版日期:2019-04-01基金资助:国家自然科学基金项目(61520106005,61761136014);国家重点研发计划项目(2017 ...
    本站小编 Free考研考试 2022-01-01
  • 划分序乘积空间:基于划分的粒计算模型
    徐怡1,2,姚一豫31(计算智能与信号处理教育部重点实验室(安徽大学)合肥230039);2(安徽大学计算机科学与技术学院合肥230601);3(里贾纳大学计算机科学系加拿大里贾纳S4S0A2)(xuyi1023@126.com)出版日期:2019-04-01基金资助:国家自然科学基金项目(6152 ...
    本站小编 Free考研考试 2022-01-01
  • 基于Intel平台的Winograd快速卷积算法研究与优化
    武铮,安虹,金旭,迟孟贤,吕国锋,文可,周鑫(中国科学技术大学合肥230022)(zhengwu@mail.ustc.edu.cn)出版日期:2019-04-01基金资助:国家自然科学基金项目(61520106005,61761136014);国家重点研发计划项目(2017YFB1010000)Re ...
    本站小编 Free考研考试 2022-01-01
  • 面向WS-BPEL程序的变异测试优化技术
    孙昌爱1,2,王真1,潘琳11(北京科技大学计算机与通信工程学院北京100083);2(宇航智能控制技术重点实验室北京100854)(casun@ustb.edu.cn)出版日期:2019-04-01基金资助:国家自然科学基金项目(61520106005,61761136014);国家重点研发计划项 ...
    本站小编 Free考研考试 2022-01-01
  • 基于稀疏框架的静态污点分析优化技术
    王蕾,何冬杰,李炼,冯晓兵(计算机体系结构国家重点实验室(中国科学院计算技术研究所)北京100190)(中国科学院大学北京100049)(wanglei2011@ict.ac.cn)出版日期:2019-03-01基金资助:国家自然科学基金项目(61521092,61432016);国家重点研发计划项 ...
    本站小编 Free考研考试 2022-01-01
  • 一种面向软件特征定位问题的语义相似度集成方法
    何云1,李彤1,2,王炜1,2,李响1,兰微11(云南大学软件学院昆明650091);2(云南省软件工程重点实验室(云南大学)昆明650091)(hey@ynu.edu.cn)出版日期:2019-02-01基金资助:国家自然科学基金项目(61462092,61379032,61662085);云南省 ...
    本站小编 Free考研考试 2022-01-01
  • 主编寄语--纪念《计算机研究与发展》创刊六十周年
    徐志伟(中国科学院计算技术研究所北京100190)出版日期:2019-01-01Online:2019-01-01摘要/Abstract摘要:时光荏苒,《计算机研究与发展》已经走过六十年,其前身为《电子计算机动态》,创刊于1958年12月,是我国第一个计算机刊物。当时我国的计算机事业刚刚起步,《电子 ...
    本站小编 Free考研考试 2022-01-01
  • 图计算中基于一致性约束条件的迭代模型研究
    孙茹君1,张鲁飞1,郝子宇1,陈左宁21(数学工程与先进计算国家重点实验室江苏无锡214125);2(国家并行计算机工程技术研究中心北京100190)(sun.rujun@meac-skl.cn)出版日期:2019-02-01基金资助:国家自然科学基金项目(9143020017);国家重点研发计划项 ...
    本站小编 Free考研考试 2022-01-01
  • 祝贺《计算机研究与发展》创刊六十周年
    陈熙霖(中国科学院计算技术研究所北京100190)出版日期:2019-01-01Online:2019-01-01摘要/Abstract摘要:今年是改革开放四十周年,也是《计算机研究与发展》创刊六十周年。《计算机研究与发展》见证了中国计算机事业从无到有、从小到大的全过程。作为国内最早的,甚至在很长一 ...
    本站小编 Free考研考试 2022-01-01
  • 和《计算机研究与发展》一起成长
    陆汝钤(中国科学院数学与系统科学研究院)出版日期:2019-01-01Online:2019-01-01摘要/Abstract摘要:每年金秋总有两个节日紧随一起:中秋节和国庆节(按时间先后)。今年可不寻常,徐主编告诉我《计算机研究与发展》(以下简称《研发》)创刊60周年了。这是我国的第一个计算机刊物 ...
    本站小编 Free考研考试 2022-01-01