大數(shù)據(jù)作業(yè)的狀態(tài)監(jiān)測及健康度評估方法、裝置

基本信息

申請?zhí)?/td> CN202011644280.1 申請日 -
公開(公告)號 CN112579685A 公開(公告)日 2021-03-30
申請公布號 CN112579685A 申請公布日 2021-03-30
分類號 G06F16/25(2019.01)I;G06F11/34(2006.01)I;G06F11/30(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 溫秋榮;沈鵬;王圣玉;張程 申請(專利權(quán))人 上海邁外迪網(wǎng)絡(luò)科技有限公司
代理機構(gòu) 北京集佳知識產(chǎn)權(quán)代理有限公司 代理人 郎彥澤;葉子濃
地址 201400上海市奉賢區(qū)上海市楊浦區(qū)控江路1142號23幢5051室
法律狀態(tài) -

摘要

摘要 大數(shù)據(jù)作業(yè)的狀態(tài)監(jiān)測及健康度評估方法、裝置,所述方法包括:預(yù)先為各種類型的作業(yè)配置監(jiān)控參數(shù),預(yù)先為各種分析項目配置分析參數(shù);在作業(yè)運行的過程中,根據(jù)所述監(jiān)控參數(shù),來采集關(guān)于該作業(yè)的作業(yè)運行數(shù)據(jù);對所述作業(yè)運行數(shù)據(jù)進行ETL處理,得到關(guān)于該作業(yè)的待評估數(shù)據(jù);根據(jù)所述分析參數(shù),來對所述待評估數(shù)據(jù)進行分析,得到關(guān)于被分析的待評估數(shù)據(jù)所對應(yīng)的作業(yè)的評分。本發(fā)明為各大數(shù)據(jù)作業(yè)建立統(tǒng)一的日志規(guī)則、日志管理配置、日志格式,進而實現(xiàn)了快速獲取作業(yè)運行狀態(tài)、及時發(fā)現(xiàn)問題、快速且精準(zhǔn)定位異常。??