【特约记者 黄海华】日前,上海天文台安涛研究员带领的SKA团队,在澳大利亚射电天文国际联合研究所和广州超算中心的协作下,在天河-2超级计算平台上成功部署了SKA数据流管理系统并完成了1000个计算节点的大规模集成测试,这是SKA核心软件首次完成大规模集成测试,为将来工程化验证提供了强有力的技术支撑,在国际上引起了广泛的关注和积极的反响,也得到SKA总部赞扬。
探寻宇宙中的第一缕曙光、深入探测引力波、验证爱因斯坦的广义相对论……这些事情,看似遥远,但科学家们也许在2030年将可以初步实现了。因为那时候,一项名为 “平方公里阵列射电望远镜(Square Kilometre Array, 简称SKA)”的国际大科学工程有望全面建成,并踏上宇宙探寻之旅。
这台世界上最大的综合孔径射电望远镜将由十多个国家共同投资65亿欧元兴建。它由分布在南非及南部非洲8个国家的2500个高频碟形天线,以及分布在澳大利亚西部沙漠无线电静默区域的上百万个偶极子低频天线组成,总接收面积达一平方公里。SKA建成后,比目前世界上最大射电望远镜阵列的灵敏度提高约50倍,巡天速度提高约10000倍。我国是SKA首倡国和正式成员国之一,就在不久前,SKA科学中心建设项目被正式列入上海市科技创新“十三五”规划中。
SKA组织总干事菲利普·戴蒙德在3个月前接受采访时,曾谈到当下SKA面临的最大挑战就是数据处理技术。未来SKA的大数据处理和计算对运算速度和计算复杂度的要求都是前所未有的,它不仅将产生巨大的数据量,每秒钟高达TB量级,已经超出目前整个互联网数据之和,而且要求这些海量数据实时处理,如何传输、计算和存储这些数据会是很大的难题。当时他预测,即使是天河-2这样的超级计算机,也难以应付,至少需要其6倍以上的计算能力。
当前射电天文中最先进的数据分析软件系统所能处理的数据量跟SKA第一阶段产生的数据相比低了两到三个数量级,远远不能满足SKA的数据处理需求。为此,由澳大利亚射电天文国际联合研究所和上海天文台安涛团队组成的联合团队研发了一款数据流管理系统,采用了“数据驱动”的先进设计理念:用软件封装数据并启动处理这些数据所需的程序。这就相当于数据被包装在一个具有活性的软件里,每当一个数据项准备就绪,它就将触发下一个执行任务,该任务不会因为等待数据而空闲运行,这样就大大提高了SKA软件在超算平台上的执行效率。
上海天文台安涛研究员说,这是中国SKA团队参与国际合作的一项典型成果。在第一步集成测试的成功基础上,下一步将考虑最高用10000节点(注:天河2号的极限能力是16000计算节点)开展全规模验证实验。这款新研发的数据流管理系统将有望成为首批完成工程化验证的SKA科学数据处理核心软件系统。
删除或更新信息,请邮件至freekaoyan#163.com(#换成@)
上海天文台研究团队牵头实现SKA核心软件首次大规模集成测试_上海天文台
上海天文台 免费考研网/2018-05-06
相关话题/数据 计算 软件 国际 测试
我台与澳大利亚国际射电天文研究所的SKA合作取得新进展_上海天文台
近年来,全球最大的天文学国际合作项目“平方公里阵列射电望远镜(SquareKilometreArray,简称SKA)”已被列入我国列为重点发展的大科学工程。SKA取得预期科学成果的关键在于科学数据处理能力。SKA超大规模的数据运算遭遇到I/O吞吐和数据实时存储的限制等重大瓶颈问题,常规的数据运算解决 ...上海天文台 上海天文台 免费考研网 2018-05-06科技部国际合作司关于征集中国-捷克科技合作委员会第43届例会交流项目的通知_上海天文台
根据《中华人民共和国政府和捷克共和国政府科学技术合作协定》及《中华人民共和国和捷克共和国科学技术合作委员会第四十二届例会议定书》,中捷政府间科技合作委员会第43届例会拟于2018年下半年召开。现开始征集本届例会交流合作项目建议。一、申报要求(一)合作项目领域应符合国家科技发展规划。支持基础研究、应用 ...上海天文台 上海天文台 免费考研网 2018-05-06国际合作局关于征集2019年度中国科学院与美国能源部合作研究项目的通知_上海天文台
为推动我院与能源部及其下属国家实验室在能源科学与能源技术领域开展“优势互补、互利双赢”的合作,现面向你单位征集2019年度中国科学院-美国能源部合作研究项目。 一、支持重点 项目优先支持中国科学院-美国能源部双边合作机制下的合作项目,重点支持: 1.围绕双方在前沿科学领域、大科学装置等方面优势 ...上海天文台 上海天文台 免费考研网 2018-05-06科技部关于发布国家重点研发计划政府间国际科技创新合作/港澳台科技创新合作重点专项2018年度第一批项目申报指南的通知_上海天文台
现转发《科技部关于发布国家重点研发计划政府间国际科技创新合作/港澳台科技创新合作重点专项2018年度第一批项目申报指南的通知》(国科发资〔2018〕74号,详见科技部主页通知:http://www.most.gov.cn/mostinfo/xinxifenlei/fgzc/gfxwj/gfxwj20 ...上海天文台 上海天文台 免费考研网 2018-05-06转发科技部国际合作司关于征集2018年度“中法杰出青年科研人员交流计划”项目的通知_上海天文台
在中法高级别人文交流机制框架下,为促进中法两国青年科研人员交流,构建中法科研机构与高校间的长期合作关系,根据科技部与法国国民教育、高等教育与研究部和法国外交与国际发展部“关于中法杰出青年科研人员交流的意向声明”的相关安排,现启动2018年度“中法杰出青年科研人员交流计划”(以下简称“本计划”)项目征 ...上海天文台 上海天文台 免费考研网 2018-05-06科技部国际合作司关于征集中罗(马尼亚)、中保(加利亚)科技合作委员会例会交流项目的通知_上海天文台
根据《中华人民共和国和罗马尼亚科学技术合作委员会第四十二届例会议定书》、《中华人民共和国和保加利亚共和国科学技术合作委员会第十五届例会议定书》,拟于2018年分别召开中罗政府间科技合作委员会第43届例会、中保政府间科技合作委员会第16届例会。现开始征集相关例会交流合作项目建议。 一、申报要求 ( ...上海天文台 上海天文台 免费考研网 2018-05-06转发院合作局关于开展2019年度国际伙伴计划对外合作重点项目申报的通知_上海天文台
为了进一步深化我院国际化推进战略,鼓励和加强与境外一流科研机构、国际组织(含港澳台地区)开展实质性科技合作研究,切实提升我院科技创新能力。根据“国际伙伴计划”管理办法和实施方案,现拟启动2019年度国际伙伴计划对外合作重点项目申报工作。请各单位按照附件中申报指南的要求,组织项目申报并通过ARP报送, ...上海天文台 上海天文台 免费考研网 2018-05-06转发国际合作局关于征集2019年度国际伙伴计划国际大科学计划培育专项项目建议的通知_上海天文台
现将《国际合作局关于启动2019年度国际伙伴计划国际大科学计划培育专项项目建议的通知》转发大家,基本信息如下。 为孕育和培养有潜力牵头发起国际性科学组织或科学计划的国际合作项目。根据《中国科学院国际伙伴计划管理办法》和年度工作安排,现拟启动2019年度项目征集工作。请按照附件项目建议征集指南的要求 ...上海天文台 上海天文台 免费考研网 2018-05-06转发国际合作局关于转发《科技部国际合作司关于申报2018年度中日青少年科技交流计划基层对口项目的通知》_上海天文台
各科研人员: “中日青少年科技交流计划”(樱花科技计划)于2014年启动,作为中日科技创新合作重要内容之一,该计划有效推动了中日科技人文交流与合作,增进了中日科技界之间的沟通与理解。科技部国际合作司与日本科技振兴机构共同启动2018年度中日青少年科技交流计划基层对口项目申报工作,有关事项通知见附件 ...上海天文台 上海天文台 免费考研网 2018-05-06科技部关于发布国家重点研发计划政府间国际科技创新合作/港澳台科技创新合作重点专项2017年度第二批项目申报指南的通知_上海天文台
现转发《科技部关于发布国家重点研发计划政府间国际科技创新合作/港澳台科技创新合作重点专项2017年度第二批项目申报指南的通知》(国科发资〔2017〕400号,详见科技部主页通知:http://www.most.gov.cn/mostinfo/xinxifenlei/fgzc/gfxwj/gfxwj2 ...上海天文台 上海天文台 免费考研网 2018-05-06