提高在线服务质量和集群资源利用率的混合调度系统

摘要

本发明提出一种提高在线服务质量和集群资源利用率的在线离线混合调度系统，包括信息采集模块，在线AM模块，离线AM模块，客户端模块，调度器模块；所述信息采集模块收集系统中各在线服务之间的调用关系，并存储到Redis中；当用户提交在线应用时，所述在线AM模块解析每个组件的依赖关系，并将所述组件按照所述依赖关系依次部署在集群中；当用户提交离线作业时，所述离线AM模块向RM申请资源，并将离线作业调度到集群中运行；所述客户端模块解析处理用户提交的作业，将所述作业转化为对应的请求向RM申请资源，并负责拉起所述在线AM模块向客户展示应用运行情况；所述调度器模块位于RM中，所述调度器模块会定时根据所述在线AM模块汇报的各容器关键度计算各服务器节点的关键度，并在调度离线作业时根据所述计算出的服务器关键度进行调度。