基于系統(tǒng)負(fù)載的MPP集群任務(wù)調(diào)度方法

基本信息

申請(qǐng)?zhí)?/td> CN201510740736.7 申請(qǐng)日 -
公開（公告）號(hào) CN105302638B 公開（公告）日 2018-11-20
申請(qǐng)公布號(hào) CN105302638B 申請(qǐng)公布日 2018-11-20
分類號(hào) G06F9/48 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 王洋;李曉鵬;陳訓(xùn)遜;黃亮;吳震;蔣旭;譚煒波;王洋洋;趙雪靜 申請(qǐng)（專利權(quán)）人 天津神舟通用數(shù)據(jù)技術(shù)有限公司
代理機(jī)構(gòu) 天津盛理知識(shí)產(chǎn)權(quán)代理有限公司 代理人 王利文
地址 100029 北京市朝陽(yáng)區(qū)裕民路甲3號(hào)
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種基于系統(tǒng)負(fù)載的MPP集群任務(wù)調(diào)度方法，其技術(shù)特點(diǎn)是包括設(shè)置在MPP集群主控節(jié)點(diǎn)上的多功能任務(wù)調(diào)度器和設(shè)置在各個(gè)節(jié)點(diǎn)上的系統(tǒng)負(fù)載計(jì)算模塊，并按以下步驟實(shí)現(xiàn)：各個(gè)節(jié)點(diǎn)上的系統(tǒng)負(fù)載計(jì)算模塊實(shí)時(shí)監(jiān)控節(jié)點(diǎn)的負(fù)載變化并反饋至MPP集群主控節(jié)點(diǎn)上；MPP集群主控節(jié)點(diǎn)上的多功能任務(wù)調(diào)度器根據(jù)任務(wù)的分布信息以及對(duì)應(yīng)節(jié)點(diǎn)的負(fù)載情況完成任務(wù)的排隊(duì)和調(diào)度。本發(fā)明在MPP集群主控節(jié)點(diǎn)上設(shè)置多功能任務(wù)調(diào)度器并實(shí)時(shí)收集集群內(nèi)所有計(jì)算節(jié)點(diǎn)的系統(tǒng)負(fù)載信息，MPP集群主控節(jié)點(diǎn)依據(jù)任務(wù)的分布信息以及對(duì)應(yīng)節(jié)點(diǎn)的負(fù)載情況，完成對(duì)任務(wù)的排隊(duì)和調(diào)度，通過對(duì)系統(tǒng)負(fù)載的實(shí)時(shí)監(jiān)控，實(shí)現(xiàn)動(dòng)態(tài)并發(fā)控制，可以有效提高資源的利用率，使系統(tǒng)達(dá)到最佳吞吐性能。