李曌
- 作品数：4 被引量：9H指数：2
- 供职机构：西南交通大学信息科学与技术学院更多>>
- 发文基金：国家自然科学基金中央高校基本科研业务费专项资金更多>>
- 相关领域：自动化与计算机技术更多>>
- 基于Hadoop的调度算法研究与实现
- 云计算作为一种新的信息技术，为海量数据的分析和处理带来了全新的视野。它是一种商业计算模型，将计算任务分布在大量计算机构成的资源池上，使用户能够按需获取计算能力、存储空间和信息服务，具有大存储、高可靠性、易于扩展等特点。H...
- 李曌
- 关键词：云计算HADOOP平台调度算法
- 文献传递
- 一种Hadoop中基于作业类别和截止时间的调度算法
- Hadoop 是一种开源可靠的分布式计算框架，而MapReduce 是处理超大规模数据集的编程模型。鉴于Hadoop 内置的调度器不能很好地处理类别不同且有截止时间的作业的调度，该算法提出了一种基于作业类别和截止时间的作...
- 李曌滕飞李天瑞杨浩
- 关键词：调度算法MAPREDUCEHADOOP
- Hadoop平台中空闲时间调度器的设计与实现被引量：6
- 2013年
- Hadoop作为开源的云计算平台,被广泛应用于自然语言处理、机器学习、大规模图像处理等领域。随着云计算与各行业广泛而深入的结合,多样化的服务对于时效性要求越来越高。现有的Hadoop调度器多关注于缩短响应时间,而非满足作业的时限要求。为了提高集群处理硬实时作业的性能,设计并实现了一种基于空闲时间的硬实时调度器LSS。在调度过程中,LSS动态估算作业的空闲时间,并据此实时更新作业队列中作业的优先级顺序。实验结果表明LSS能够有效地提高集群处理硬实时作业的成功率。
- 杨浩滕飞李天瑞李曌
- 关键词：云计算调度空闲时间
- 一种Hadoop中基于作业类别和截止时间的调度算法被引量：5
- 2015年
- Hadoop是一种开源可靠的分布式计算框架,而MapReduce是处理超大规模数据集的编程模型。鉴于Hadoop内置的调度器不能很好地处理类别不同且有截止时间的作业的调度,提出了一种基于作业类别和截止时间的作业调度算法。作业分为CPU密集型和I/O密集型,并根据截止时间设置优先级来实现作业的调度。实验结果表明,该算法在充分利用集群的CPU和磁盘I/O的同时,能满足作业的截止期需求,当同一时间段内截止时间相近时算法达到最优,当某一队列中作业截止时间均比另一种队列短时,算法效率最低。
- 李曌滕飞李天瑞杨浩
- 关键词：调度算法MAPREDUCEHADOOP
