日志數(shù)據(jù)的處理方法、裝置、系統(tǒng)以及介質(zhì)

基本信息

申請(qǐng)?zhí)?/td> CN202111537067.5 申請(qǐng)日 -
公開(kāi)（公告）號(hào) CN114168672A 公開(kāi)（公告）日 2022-03-11
申請(qǐng)公布號(hào) CN114168672A 申請(qǐng)公布日 2022-03-11
分類號(hào) G06F16/25（2019.01）I;G06F16/28（2019.01）I;G06F16/248（2019.01）I;G06F40/174（2020.01）I;G06Q10/06（2012.01）I;G06Q40/08（2012.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 周凱;李巍;張榮兵;李康;王健;石林;周政卓;陶華君 申請(qǐng)（專利權(quán)）人 明覺(jué)科技（北京）有限公司
代理機(jī)構(gòu) 北京奉思知識(shí)產(chǎn)權(quán)代理有限公司 代理人 鄒軼鮫;石紅艷
地址 100124北京市朝陽(yáng)區(qū)高碑店鄉(xiāng)半壁店村惠河南街1008號(hào)B座5層5009
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種日志數(shù)據(jù)的處理方法、裝置、系統(tǒng)以及介質(zhì)。所述方法包括：獲取步驟，獲取車輛保險(xiǎn)的日志數(shù)據(jù)；預(yù)處理步驟，基于服務(wù)類型，利用Flink引擎對(duì)獲取的日志數(shù)據(jù)進(jìn)行預(yù)處理，以生成具有預(yù)定格式的半結(jié)構(gòu)化日志數(shù)據(jù)；結(jié)構(gòu)化處理步驟，根據(jù)日志數(shù)據(jù)的類型，對(duì)半結(jié)構(gòu)化日志數(shù)據(jù)進(jìn)行結(jié)構(gòu)化處理，以將半結(jié)構(gòu)化日志數(shù)據(jù)轉(zhuǎn)換為適于數(shù)據(jù)統(tǒng)計(jì)分析的結(jié)構(gòu)化日志數(shù)據(jù)；以及加載步驟，將結(jié)構(gòu)化日志數(shù)據(jù)加載到數(shù)據(jù)庫(kù)中。本發(fā)明的上述方法能夠針對(duì)車輛保險(xiǎn)的日志數(shù)據(jù)能夠進(jìn)行有效地解析及存儲(chǔ)，從而能夠支持多維度且深層次的報(bào)表生成、數(shù)據(jù)分析等數(shù)據(jù)統(tǒng)計(jì)業(yè)務(wù)。