文件名称:论文研究-Hadoop平台下基于截止时间限制的动态调度算法的研究.pdf
文件大小:693KB
文件格式:PDF
更新时间:2022-08-11 16:32:19
MapReduce,截止时间,动态调度,抢占策略,Hadoop
为了满足有截止时间限制的MapReduce作业的需求,提出一种基于截止时间限制的动态调度算法(DCDS)。该算法实时监控作业运行状况,并对作业运行时间进行动态估算,从而确定作业优先级;对于时间紧迫的作业,可通过抢占策略来保证在用户要求的截止时间内完成。实验结果表明,与Hadoop平台现有的调度算法相比,该算法不仅能满足作业截止时间的要求,也提高了系统资源的利用率和吞吐量。