来自世界上最大的数码相机的宇宙图像非常大,需要一个“数据管家”

维拉·C·鲁宾天文台将收集的数据量,将远远超过之前的任何望远镜所能提供的。这促使天文学家们开始尝试云计算,并寻求七个经纪人和一个数据管家的帮助。

一旦全面运行,(由美国国家科学基金会和能源部资助)将每晚收集 20 太字节的数据。通过分析这些数据,它将向天文学家发出 1000 万次警报,所有这些警报将由被称为“经纪人”的人员管理,他们将过滤大量警报,使其更易于管理。

未来十年,鲁宾的“时空遗产调查”将收集 500 PB 的数据,相当于 50 万张 4K-UHD 蓝光光盘。一旦被望远镜收集,数据将通过位于智利的鲁宾望远镜和位于加利福尼亚州 SLAC 国家加速器实验室的数据中心之间的专用网络链接传输。来自 SLAC 的所有原始数据副本将被发送到法国里昂的 IN2P3 计算设施,部分数据也将被发送到位于英国的分布式计算网络。

数据的处理将在这三个数据中心之间共享,SLAC 贡献 35%,IN2P3 承担 40%,英国承担 25%。 (智利也有一个小型数据中心,托管鲁宾天文台,以支持智利天文学家。)多个数据中心不仅提供了冗余,以防止数据在事故中丢失,而且如果一个数据中心在处理方面落后,它们还可以互相支持。这是因为对于天文学家来说,真正重要的是尽快获取重要数据,以便他们能够尽快跟进有趣的警报。

“我最大的挑战是让天文学家们不断地索取他们的数据!”贝克特开玩笑说。

如此庞大的数据量将成为天文学家们宝贵的资源,不仅在现在,而且在未来几十年内。

相关文章