一種基于正負(fù)反饋負(fù)載調(diào)度算法的Hadoop集群任務(wù)調(diào)度方法

基本信息

申請(qǐng)?zhí)?/td> CN202111192598.5 申請(qǐng)日 -
公開（公告）號(hào) CN113934525A 公開（公告）日 2022-01-14
申請(qǐng)公布號(hào) CN113934525A 申請(qǐng)公布日 2022-01-14
分類號(hào) G06F9/48（2006.01）I;G06F9/50（2006.01）I;G06F16/182（2019.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 岳正飛;郭強(qiáng);楊融 申請(qǐng)（專利權(quán)）人 正數(shù)網(wǎng)絡(luò)技術(shù)有限公司
代理機(jī)構(gòu) 鄭州意創(chuàng)知識(shí)產(chǎn)權(quán)代理事務(wù)所（特殊普通合伙） 代理人 張江森;侯喜立
地址 450000河南省鄭州市鄭東新區(qū)金水東路39號(hào)中國(guó)河南出版產(chǎn)業(yè)園D座6-7樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于正負(fù)反饋負(fù)載調(diào)度算法的Hadoop集群任務(wù)調(diào)度方法，應(yīng)用于Hadoop的資源調(diào)配中心，集群任務(wù)調(diào)度方法包括：空閑計(jì)算節(jié)點(diǎn)向管理節(jié)點(diǎn)申請(qǐng)執(zhí)行任務(wù)請(qǐng)求；管理節(jié)點(diǎn)接收任務(wù)請(qǐng)求，并查詢是否有運(yùn)行該任務(wù)請(qǐng)求的歷史記錄；歷史記錄對(duì)比分析，若與該任務(wù)配置符合資源需求，則該任務(wù)在此計(jì)算節(jié)點(diǎn)中計(jì)算，否則，該計(jì)算節(jié)點(diǎn)重新匹配新任務(wù)請(qǐng)求；能夠在集群任務(wù)調(diào)度中根據(jù)不同服務(wù)器的資源使用情況及服務(wù)器性能差異性動(dòng)態(tài)分配計(jì)算任務(wù)，實(shí)現(xiàn)計(jì)算任務(wù)的高效完成并提高CPU及資源使用效率。