分类: 天文学 >> 天文学 提交时间: 2018-05-29 合作期刊: 《天文研究与技术》
摘要: 在利用LAMOST巡天数据进行特殊天体搜寻或样本构建时,以及在处理LAMOST不断累积的低信噪比光谱时,通常需要耗费科学家大量的时间完成人工识谱。针对这样的问题,我们设计并实现了一套专家识谱平台。该平台是集光谱可视化、光谱分析、多波段图像融合、多种数据挖掘算法等功能于一体的科学与科普教研平台。利用该平台,天文学家进行天体搜寻、样本构建等科学研究将会变得相对容易;通过该平台,高校教师可以开展各种有天文特色的教研活动;借助群体力量,该平台将能逐步消化LAMOST不断积累的标注为UNKNOWN的未知光谱数据。
分类: 天文学 >> 天文学 提交时间: 2017-10-11 合作期刊: 《天文研究与技术》
摘要: 为应对我国的宽视场地基广角相机阵在大数据管理和实时处理上带来的挑战,提出一种基于列存储数据库MonetDB的时序数据处理与管理系统设计方案。本方案充分利用MonetDB兼具数据处理和管理于一体的数据库平台特点,通过将交又认证等核心数据处理算法内嵌于数据库中,从而实现将“计算带到数据中”的设计理念。同时,对本方案开展了多项关键技术的研究与测试:TPC-H基准性能测试;大数据加载能力测试及优化研究;基于MonetDB的Zone算法实现与测试;可定制函数开发功能的测试。初步的预研结果表明,列存储切实可行,同时对本设计方案作详细的介绍。提出的基于列存储MonetDB数据库设计的海量星表数据处理应用方案,是高效的数据处理与管理为一体的天文数据库解决方案。