杨志
- 作品数：5 被引量：11H指数：2
- 供职机构：国网电力科学研究院更多>>
- 相关领域：自动化与计算机技术更多>>
- 基于对象化并行计算复杂场景的解决方案
- 2016年
- 由于当前电力行业业务处理复杂,读取吞吐量大,业务数据海量等特点,传统计算方法及传统数据库交互方式,已无法满足用户的效率需求。提出了一种高性能对象化并行计算框架,该框架由内存服务器,内存管理服务器,客户端三个组件构成,融合了对象化技术,内存计算,分布式计算等思想,并且在国家电网电能质量在线监测系统中得到了应用。结果表明该框架能够大幅度提升数据的处理效率。
- 刘铭张春平杨志张琦
- 关键词：分布式计算并行计算对象化
- 分布式内存电网关键技术研究及应用被引量：1
- 2016年
- 随着电力信息系统集成度逐步加大,管理范围进一步延伸至低压,由此带来的复杂资源模型和海量资源数据,使得基于关系数据库的传统电网资源模型和存储方式,在电网资源访问效率、数据计算能力、电网历史断面管理等多个方面均无法满足发展需求。目前主流的分布式和内存计算产品由于其通用性设计,使得其在直接应用于国家电网公司业务系统时,无法发挥最大优势,甚至存在无法解决的工程应用问题。分布式内存电网是在内存计算、分布式计算等技术基础上,通过深度融合国网业务,研究并构建的一套满足电网资源处理需求,高可靠、扩展性强、符合国家电网公司业务特点的分布式、内存计算技术及产品。试验验证表明,分布式内存电网能够全面提升电力业务信息系统对电网资源数据的处理能力,大幅提升处理效率。
- 张春平杨波杨志
- 关键词：分布式计算
- 一种高效的大数据实时性解决方案被引量：8
- 2014年
- 大数据计算是物联网和云计算的研究热点之一。针对大数据中的结构化和非结构化数据,Hadoop技术在实时性要求不高的场景中应用效果较好,但在实时性要求高的场景中不能满足需求。针对这一问题,论文利用对象化并行计算提出了一种高效的实时性解决方案。对象化并行计算融合了对象化、Hadoop、内存计算等技术。在方案中,业务数据格式化成对象并分布式存储到集群计算机内存中,任务拆分成子任务通过并行计算来完成。对象化并行计算系统应用在国家电网公司电网资产质量监督管理系统中,应用效果表明该方案可大幅度提升系统性能,满足实时性需求。
- 唐云善杨志
- 关键词：大数据HADOOP
- 一种实时大数据查询技术-对象分布式查询被引量：3
- 2015年
- 分布式查询是大数据计算的研究热点之一。在电力信息化、精益化的建设过程中,业务复杂度不断提高,数据量与日俱增,这使得数据查询性能日益劣化,难以满足用户实时性要求(<10s)。在对象化并行计算中,大数据拆分成小数据,分布式存储在集群内存中。论文在此基础上,借鉴了分而治之和归并树的思想,将分布式查询分成两个阶段:本地并行查询和多级查询融合。数据对象实现本地并行查询,结果排序后,得到本地部分查询结果,查询结果经多级查询融合得到最终结果。对象分布式查询技术应用在国家电网公司工程生产管理系统(PMS)中,应用效果表明该技术稳定、可靠,性能提升几十至数百倍,可满足实时性需求。
- 杨志
- 关键词：大数据分布式查询
- 一种基于业务词典的精准主题挖掘解决方案
- 2018年
- 文本挖掘是数据挖掘的一个重要研究方向。许多科研机构和科研团队提出了通用有价值的文本挖掘算法。但由于行业和场景的差异,很难用通用的数据分析算法准确挖掘出电力行业日志数据的潜在价值。例如,在电力一个故障场景中,很难找到与指定主题语义相关的词。针对这一问题,论文提出了一种基于业务词典的精确主题挖掘解决方案。该方案中,首先针对电力行业和特定场景创建业务词典,在预处理后的文档集中借助于业务词典进行热词分析,最后对指定的主题词集合进行语义关联分析。该方案已经在PMS的故障日志中进行了验证,结果显示主题词相关因素分析准确有效,提高了故障分析效率。
- 杨志林峰胡牧孟庆强郑浩泉
- 关键词：文本挖掘知识发现主题挖掘
