分布式任務(wù)計算調(diào)度框架搭建的方法、裝置及計算機設(shè)備

基本信息

申請?zhí)?/td> CN202011512271.7 申請日 -
公開（公告）號 CN112667393B 公開（公告）日 2021-10-29
申請公布號 CN112667393B 申請公布日 2021-10-29
分類號 G06F9/50（2006.01）I 分類 計算；推算；計數(shù);
發(fā)明人 陳定瑋;周景鋒 申請（專利權(quán)）人 飛算數(shù)智科技（深圳）有限公司
代理機構(gòu) 深圳卓正專利代理事務(wù)所（普通合伙） 代理人 吳思瑩;萬正平
地址 518000廣東省深圳市前海深港合作區(qū)前灣一路1號A棟201室（入駐深圳市前海商務(wù)秘書有限公司）
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及分布式任務(wù)計算調(diào)度框架搭建的方法、裝置及計算機設(shè)備，該方法包括：選擇對應(yīng)的目標計算框架類型；獲取對應(yīng)的目標分布式任務(wù)部署策略；搭建分布式資源數(shù)據(jù)處理框架；根據(jù)所述目標分布式任務(wù)部署策略獲取對應(yīng)的目標資源調(diào)度策略，根據(jù)所述目標資源調(diào)度策略建立分布式任務(wù)消息隊列；將所述分布式任務(wù)消息隊列中各個任務(wù)管理元素與所述分布式資源數(shù)據(jù)處理框架的各個分布式數(shù)據(jù)層對應(yīng)連接；基于所述目標資源調(diào)度策略調(diào)用所述分布式資源數(shù)據(jù)處理框架中的分布式數(shù)據(jù)進行數(shù)據(jù)計算處理。本發(fā)明提供了一種高效、高性能，高可用的分布式大數(shù)據(jù)計算框架搭建方案。