• 基于异构数据库的空间天文卫星数据组织方法

    分类: 天文学 >> 天文学 提交时间: 2022-01-14 合作期刊: 《天文研究与技术》

    摘要: 随着空间天文卫星获取数据量越来越多,数据应用逐渐发挥了重要作用。现有的天文卫星地面系统中,数据存储方式和组织方法各异,数据量达PB级,并且数据量持续增长,无法快速查找并提取特征参数,难以满足数据应用对查询的时效性要求。本文提出了一种新的空间天文卫星数据组织方法,通过解析抽取数据中的海量特征参数,建立观测时间、空间位置与特征参数的关联,实现在统一时空下的多源数据组织;同时采用关系型数据库与非关系型数据库结合的异构存储方式,设计了海量特征参数存储管理系统。将本文方法应用于空间科学卫星大数据应用平台系统中,使用硬X射线调制望远镜卫星数据的实验结果表明,系统针对按照时间、空间条件获取数据的要求能够较好满足,相比关系型数据库数据组织方式,相同查询模式下数据检索效率明显提高;并且随着数据存储量的增加,系统具有稳定的扩展能力。

  • GECAM卫星快速预处理流程设计与实现

    分类: 天文学 >> 天文学 提交时间: 2021-05-27 合作期刊: 《天文研究与技术》

    摘要: GECAM是专门针对引力波伽马暴的研究机遇而提出的中国科学院空间科学(二期)先导专项卫星任务。GECAM卫星通过数传、遥测以及北斗短报文三个通道下行触发、事例、并道、工程以及短报文等多种类型的数据,数据预处理过程需要对这些数据进行快速正确处理,以满足科学家对天文事件数据正确性和时效性的要求。本文针对GECAM卫星数据处理时效性要求高、数据连续完整、多信道数据融合处理以及触发事件数据切分等特点,对科学数据处理流程和天文警报信息处理流程进行了设计,概述了关键核心算法的思路与实现方法。卫星发射入轨后,数据预处理软件运行良好,正确性和及时性指标满足要求,为后续爱因斯坦探针(EP)卫星、中法天文卫星(SVOM)等空间天文卫星开展数据预处理工作提供了参考。