何晨
- 作品数:2 被引量:5H指数:1
- 供职机构:重庆邮电大学高性能计算与应用研究所更多>>
- 发文基金:国家自然科学基金更多>>
- 相关领域:自动化与计算机技术更多>>
- 基于调度器的Hadoop性能优化方法研究被引量:4
- 2013年
- 为了提高Hadoop调度器的调度性能,缩短Hadoop集群的任务整体响应时间,提出了一种基于CPU占用率的动态调度改进算法。首先对Hadoop传统的性能优化方法进行了对比,指出其存在问题的关键是缺乏动态性和灵活性。在此基础上,深入分析Hadoop默认任务调度模型,提出了一种以CPU占用率作为负载指标,在循环分配任务时根据反馈的负载指标判断节点负载情况的算法,动态适应负载变化。实验结果表明,该算法在Hadoop集群中,能有效提高集群性能。
- 刘娟豆育升何晨唐红
- 关键词:HADOOPCPU占用率云计算动态调度
- 短程力分子模拟在Hadoop上的实现及优化被引量:1
- 2013年
- 在Hadoop开源云计算平台上运行分子模拟程序,具有节省软硬件投资、缩短模拟时间等研究意义。然而,该平台并不擅长科学计算类应用中所涉及的快速迭代和子任务间通信。为此,在原子分解法基础上提出了三种解决方案并利用"读写HDFS同步法"实现短程作用力有效的分子动力学模拟的并行算法。在一个Hadoop集群上测试和分析了程序的可扩展性、加速比和各部分耗时情况,结果表明在大规模体系模拟中有较好的效果,最高取得了28倍的加速比。实验证明,Hadoop并行技术在分子模拟中有着较高的经济价值和实用价值。
- 焦善飞何晨豆育升唐红
- 关键词:分子动力学云计算HADOOP平台