梁栋
- 作品数:7 被引量:10H指数:1
- 供职机构:中国科学院高能物理研究所更多>>
- 发文基金:国家自然科学基金中国科学院知识创新工程更多>>
- 相关领域:自动化与计算机技术理学更多>>
- 大规模BES作业提交与管理系统的设计与实现
- 针对BES作业的特点设计了大规模高能物理作业的提交与管理系统,目的是为物理学家提供一个简洁高效的作业管理平台。系统根据用户要求可将作业发送至不同的计算环境运行,并实时监控作业运行状态,对发生错误的作业自动重新提交。针对数...
- 石京燕梁栋孙功星陈刚
- 关键词:WEB服务
- CMS实验中关系数据库的精确关键词查询被引量:1
- 2014年
- 在大型强子对撞机(LHC)上紧凑型缪子螺线管探测器(CMS)实验的复杂数据环境下,有多个关系型数据源记录了关于数据组织和分布的信息。为实现数据查询系统的精确关键词查询功能,通过分析数据库模式图的方法,将关键词查询语言动态翻译成SQL语言,设计并实现一个跨数据库平台的关键词查询系统。针对动态翻译过程中存在的二义性问题,提出基于查询实体的模式图分析算法,以及基于最小权重树查找的动态连接算法。实验结果表明,该动态连接算法能为关键词查询正确生成所需数据库表的连接方式,使关键词查询系统具有较高的查询效率,以满足用户实时、精确查询的需求。
- 梁栋臧冬松孙功星Valentin Kuznetsov
- 关键词:关键词查询查询语言关系数据库结构化查询语言
- Quattor模板自动生成系统
- 2008年
- Quattor软件启动节点机的PXE网卡远程安装节点机,根据节点机的环境和要安装的软件包、服务等来实现自动安装节点机,并通过用PAN语言编写以后缀名tpl结尾的模板文件来描述上述信息。针对一些Quattor系统管理员不熟悉模板编写的问题,该文设计Quattor模板自动生成系统,该系统能在远程使用支持HTTPS(SSL上的HTTP)协议的Web浏览器,通过Web界面使Quattor自动生成模板,可保证在安全性的前提下,提供简单深入的远程模板自动生成。
- 翁云剑蒋卓明樊滑翔梁栋孙功星
- 关键词:自动生成系统
- CMS实验元数据发现的数据聚集系统
- 2014年
- 在大型强子对撞机上的紧凑繆子螺线管探测器实验,具有数据量大(PB级规模)、数据类型复杂与数据地理上全球分布的特点。记录上述数据的元数据达到TB级的规模,并且以不同的格式保存在不同的关系和非关系数据源中,通过在这些异构数据源上添加一个缓存层的方法,实现一个提供精确的关键词查询的数据聚集系统。根据多重映射和聚集的方式支持用户的查询,并利用有效的缓存管理策略来提升查询的命中率。实验结果表明,该系统能够通过缓存的方式响应超过70%的用户查询,具有良好的查询性能。
- 梁栋臧冬松霍菁孙功星Valentin Kuznetsov
- 关键词:关键词查询数据聚集缓存管理异构数据源
- 基于MapReduce的高能物理数据分析系统被引量:9
- 2014年
- 将MapReduce思想引入到高能物理数据分析中,提出一个基于Hadoop框架的高能物理数据分析系统。通过建立事例的TAG信息数据库,将需要进一步分析的事例数减少2-3个数量级,从而减轻I/O压力,提高分析作业的效率。利用基于TAG信息的事例预筛选模型以及事例分析的MapReduce模型,设计适用于ROOT框架的数据拆分、事例读取、结果合并等MapReduce类库。在北京正负电子对撞机实验上进行系统实现后,将其应用于一个8节点实验集群上进行测试,结果表明,该系统可使4×10-6个事例的分析时间缩短23%,当增加节点个数时,每秒钟能够并发分析的事例数与集群的节点数基本呈正比,说明事例分析集群具有良好的扩展性。
- 臧冬松霍菁梁栋孙功星
- 关键词:高能物理MAPREDUCE模型集群分布式计算
- 大规模BES作业提交与管理系统的设计与实现
- 2010年
- 针对BES作业的特点设计了大规模高能物理作业的提交与管理系统,目的是为物理学家提供一个简洁高效的作业管理平台。系统根据用户要求可将作业发送至不同的计算环境运行,并实时监控作业运行状态,对发生错误的作业自动重新提交。针对数据密集型物理作业的特点,可以将大作业拆分成大量小作业以实现大规模作业提交,从而达到高效并行运行目的。系统采用Web Service技术,选用GSOAP作为传输协议,屏蔽了计算机的异构性,为用户提供方便灵活的多平台作业提交模式。
- 石京燕梁栋孙功星陈刚
- 关键词:WEB服务