当全球最大的望远镜遇见全球第二快的超级计算机
(图片来源:ICRAR)
管理平方公里阵列(SKA)望远镜数据的软件系统原型已运行在中国世界第二快的超级计算机上。
目前,一支国际联合小组正在对该系统进行设计。完成后,该系统将对观测到的恒星和银河系的原始数据进行处理,并将其转化成世界各地天文学家都可以研究的形式。
国际射电天文学研究中心(ICRAR)数据密集型天文学的负责人安德雷斯·维斯尼克(Andreas Wicenec)教授介绍说,“我们称之为SKA科学数据处理器,也就是望远镜的‘大脑’。”
由中国科学院上海天文台安涛教授和西澳大利亚维克尼克教授领导的一个国际小组在天河二号超级计算机上成功的部署了科学数据处理器执行框架原型。
该执行框架提供了控制和监视环境用以在上千个独立计算节点上执行数百万个能够消化和生产上百万数据项的任务。
这样的规模正是处理6至12小时SKA观测数据所必须的 。
(图片来源:ICRAR)
维斯尼克教授称该科学数据处理器的执行框架是“由数据驱动的”,意思是独立的数据项被储存在某一活跃的软件中,该软件会自动触发有关应用对数据进行处理。
他继续说道,“无论何时只要某一数据项准备好了,下一任务就会被启动——任务不会空置,而是一直在准备启动之中”。安教授说该原型最初在超级计算机上的500个计算节点上运行,后来才扩展到了1000个节点。
“下一步是增加部署的独立节点,将计算节点的数量增加到8500个左右,这也是我们为SKA计算机设定的目标”。
维斯尼克教授称该系统现在可以处理6.6万个项目,下一步将增加到数百万个。
“届时我们将在8500或一万个计算节点上运行五六千万个的数据项目”。
天河二号部署在位于中国广州的国家超级计算中心,它有16000个计算节点,每秒可进行千万亿次的计算。
从2013年6月到2016年6月它一直是全世界最快的超级计算机。
“天河二号”的主任设计师卢宇彤介绍说,“最重要的是对SKA数据处理软件组和天河二号等超级计算机进行联合设计和优化,为在未来几年内生产出更快的计算机做好准备”。
该项目是由剑桥大学主导的SKA科学数据处理器工作包的一部分。
SKA可说是世界上最大的科学项目,光是望远镜的低频部分就装有超过25万个天线。
在全世界的两台SKA望远镜中,任意一台每秒产生的数据都足以填满一台普通笔记本电脑的硬盘。
(原文链接:https://www.scimex.org/newsfeed/worlds-biggest-telescope-meets-worlds-second-fastest-supercomputer)