邓传华
- 作品数:4 被引量:22H指数:1
- 供职机构:石家庄铁道大学更多>>
- 相关领域:自动化与计算机技术更多>>
- Hadoop下基于统计最优的资源调度算法被引量:22
- 2013年
- 云计算集群中的资源存在异构和节点稳定性问题。异构资源的计算能力不同会导致较突出的作业任务同步问题,而某个节点的不稳定状态会使运行于该节点的任务大量备份或重新计算。针对上述两问题将严重影响集群作业的执行进度,在Hadoop平台下利用统计方法,提出一种资源调度算法,对计算资源较少的节点和不稳定状态的节点进行标志并降权,让集群尽可能调度资源较好的稳定节点。实验结果表明,该算法能够在一定程度上减少作业的周转时间,提高集群的效率和吞吐量。
- 邓传华范通让高峰
- 关键词:云计算资源调度HADOOPMAPREDUCE
- 一种基于Hadoop的作业转移调度算法
- 2012年
- 云环境服务集群中作业提交存在着非均匀分布的问题,此问题会导致某一时刻作业聚集,从而引起作业的响应时间超出用户容忍范围。针对该问题,笔者在Hadoop平台下利用二级队列技术,提出一种基于队列的作业转移调度策略(JTSA)。实验结果表明,在作业数量某一时刻剧增的情况下,对总完成时间影响不大而且能够较大幅度提高作业的响应速度,随着作业数的增加,这种效果越明显。
- 邓传华范通让高峰
- 关键词:云计算作业调度HADOOP
- 物联网数据管理框架的研究与设计
- 范通让王建民高峰刘丹陈彦钊邓传华张宣
- 以都柏林元数据标准为基础,制定了物联网多级元数据标准。在DRAGON-Lab实验平台上,设计了面向服务的数据管理框架,实现了从数据收集到顶层应用的全程数据管理,研发了基于DRAGON-Lab实验平台的"智慧园区物联网管理...
- 关键词:
- 关键词:物联网
- Hadoop云平台下作业与资源调度机制的改进研究
- 摩尔定律在过去几十年间对我们都是适用的,但解决大规模计算问题却不能单纯依赖于在芯片上集成越来越多的晶体管和制造越来越大型的服务器。为了满足尖端计算领域的需求,研究人员不得不利用多核的手段来进一步提高计算机的运算性能,网格...
- 邓传华
- 关键词:云计算HADOOP作业调度资源调度
- 文献传递