高丹
- 作品数:8 被引量:23H指数:3
- 供职机构:中国科学院国家天文台更多>>
- 发文基金:国家自然科学基金北京市科技新星计划国家高技术研究发展计划更多>>
- 相关领域:天文地球自动化与计算机技术更多>>
- 中国虚拟天文台交叉证认工具的开发和应用被引量:5
- 2008年
- 随着空间和地面巡天项目的发展,天文数据呈指数增长,天文学已发展到全波段的天文学时代.为了应对形势的需要,虚拟天文台应运而生.为了使天文学家做起科学来更方便快捷,虚拟天文台项目开发了各种实用工具.在数据融合方面,中国虚拟天文台项目开发了交叉证认工具.该工具主要实现了两个服务:一个是服务器端两星表交叉证认;另一个是用户上传星表与服务器端星表交叉证认.前者两星表直接进行交叉证认,后者则先将本地数据自动入库再进行交叉证认.程序还实现了对交叉证认结果的分类和参数的自由选择等功能,以及与可视化工具VOPlot的集成.该工具以客户端/服务器端模式的web网页形式发布.此工具为多波段数据融合提供了便利,是对两个大星表交叉证认工作的预研究.在以后的工作中,将不断地更新和完善该工具,并将在此基础之上进一步开发统计分析和数据挖掘等工具.
- 高丹张彦霞赵永恒
- 海量天文数据融合系统的开发与数据挖掘算法的研究——工具开发与算法研究
- 随着天文学“数据雪崩”和“信息爆炸”时代的到来,为了解决天文数据的复杂性、分布性、海量性和多波段性等一列问题,基于数据库的多波段数据的数据融合和数据挖掘研究逐渐成为天文学研究的热点。
本研究工作分为四部分:
...
- 高丹
- 关键词:天文学海量数据数据融合数据挖掘算法
- 海量星表融合系统(XMaS_VO)的设计与开发被引量:2
- 2008年
- 将不同波段的星表、特别是巡天项目产生的大型星表进行交叉证认,一直是进行多波段天文学研究,尤其是数据挖掘、统计分析研究的瓶颈。本文开发和实现了一个不依赖于特定数据库的海量星表融合系统(简称为XMaS_VO),用户能够方便地使用此系统的服务进行星表的上传及自动入库、交叉证认等工作。此外,XMaS_VO具备可移植性,如果用户需要进行很大数量的或者大型星表的交叉证认服务,可以自己建立数据库,方便地将此工具移植到自己的服务器上,自己使用或者开放服务给他人。随着该系统的进一步发展和应用,天文学家将可以轻松自如地获得他们需要的多波段融合数据,自由地选取参数和匹配的结果,从而可以更加有效地从事海量数据处理和分析工作。
- 高丹路勇张彦霞赵永恒
- 关键词:数据处理数据挖掘
- 异地异构天文数据资源的统一访问被引量:3
- 2008年
- 天文观测数据资源具有时间跨度大,数据量大,存储、管理分散,管理工具驳杂等特点。如何提供给天文学家一个统一访问这些异地存放的异构数据资源的方案,是虚拟天文台的一个重要研究课题。本文提出了一种基于网格的解决方案。我们基于OGSA-DAI技术实现了对天文星表数据,图像数据和光谱数据的封装(DataNode)。我们设计的虚拟天文台数据访问服务(VO-DAS)实现了对DataNode的自动资源发现以及异地异构数据库的联合访问。这将使天体的多波段交叉证认成为可能。VO-DAS支持国际虚拟天文台联盟(IVOA)的各项相关标准,使得它具有良好的互操作性。它的对外接口简单实用,可以针对不同需求的天文数据用户发展出多种网格应用产品。通过在两个科学范例中应用VO-DAS服务,证明了它的可行性。
- 刘超田海俊高丹杨阳路勇崔辰州赵永恒
- 关键词:网格服务科学数据网格工作流虚拟天文台
- 虚拟天文台数据访问系统(VO-DAS)任务调度设计与实现被引量:1
- 2011年
- 为解决异地、异构、海量天文数据无缝透明地统一访问,中国虚拟天文台(China-VO)研究小组自主设计并开发了一套解决方案——虚拟天文台数据访问系统(VO-DAS)。着重从执行流程、设计模式、Session机制、生命周期、资源销毁、异常处理等模块详细阐述了该系统的任务调度设计。为了验证该系统的可行性和性能,最后描述了多个天文科学范例。
- 田海俊刘超高丹路勇杨阳崔辰州赵永恒郑小平
- 关键词:任务调度WSRF网格服务虚拟天文台
- 海量天文数据融合系统的开发与数据挖掘算法的研究——工具开发和算法研究
- 高丹
- 关键词:数据融合数据挖掘巡天星表
- 天文星表入库的自动化被引量:2
- 2007年
- 天文数据主要包括星表、星图、光谱、文献资料等,其中星表是包含天体信息的数据表格,是天文学家最常用到的天文数据。目前天文数据分布存储在全球各个数据中心。中国最大的天文数据中心是北京天文数据中心,其数据库的重要部分是天文星表数据库。本文阐述了建设天文星表数据库的意义,着重探讨了星表自动入库工具的实现,并介绍了在天文星表数据库基础上的数据融合和数据挖掘。
- 高丹张彦霞赵永恒
- 关键词:数据融合数据挖掘
- 海量多波段星表数据的交叉证认的实现被引量:9
- 2005年
- 许多天文学家需要星表来选源、证认和研究。目前国外有一些大的数据中心提供了星表查询、多源查询(即小样本交叉证认)、可视化等功能。但是随着大数据量及全波段天文时代的到来,这些服务已经越来越不能满足天文学家的需求。在详细分析了国外数据中心的服务后,提出了新的问题,并给出一套解决方案。着重讨论了任意两个星表的交叉证认和大数据量星表的交叉证认的实现,以及交叉证认结果的分类和参数的自由选择等方面的课题。
- 高丹张彦霞赵永恒
- 关键词:数据分析星表