标题
  • 标题
  • 作者
  • 关键词

虚拟计算集群资源管理和作业调度设计与实现

2021-09-23分类号:TP301.6

【作者】陶宇炜  
【部门】常州大学信息化建设与管理处  
【摘要】随着高性能计算需求的增加,集群的计算资源和计算能力不能满足多应用的复杂计算场景,难以应对作业高峰时的使用需求,存在资源隔离和机时闲置浪费的情况。为了解决高性能计算(HPC)集群资源管理和作业调度存在的问题,该文提出基于Docker容器的计算集群资源管理和优先级预约回填作业调度策略。根据用户提交的作业队列长度和集群虚拟资源需求变化,动态调整集群计算节点的形态,统一管理集群虚拟计算资源,定制用户作业运行环境。设计优先级预约回填作业调度策略,能够高效调度数量较大的串行和并行作业,满足集群计算资源使用的公平性,并提高其利用效率。通过与Firstfit策略和FCFS策略对比实验,该策略能有效兼顾计算集群的负载均衡,进一步提升集群作业调度的性能,满足集群的计算需求。
【关键词】计算集群  虚拟化  资源管理  作业调度  预约回填
【基金】国家自然科学基金项目(21978026);; 常州大学高等职业教育研究院重点项目(CDGZ2019001)
【所属期刊栏目】实验技术与管理
文献传递