結(jié)合多因子分析技術(shù)和MapReduce技術(shù)的海量數(shù)據(jù)簡化及處理系統(tǒng)

基本信息

申請?zhí)?/td> CN201710352944.9 申請日 -
公開(公告)號 CN107315769B 公開(公告)日 2021-03-12
申請公布號 CN107315769B 申請公布日 2021-03-12
分類號 G06F16/2458(2019.01)I;G06F16/215(2019.01)I 分類 計算;推算;計數(shù);
發(fā)明人 楊磊 申請(專利權(quán))人 北京安點科技有限責任公司
代理機構(gòu) 北京方圓嘉禾知識產(chǎn)權(quán)代理有限公司 代理人 董芙蓉
地址 100142北京市海淀區(qū)恩濟莊永安里3號樓四層429室
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種結(jié)合多因子分析技術(shù)和MapReduce技術(shù)的海量數(shù)據(jù)簡化及處理系統(tǒng),包括一個或數(shù)個數(shù)據(jù)采集及預(yù)處理模塊、處理節(jié)點調(diào)度模塊、數(shù)據(jù)處理模塊、數(shù)據(jù)結(jié)果匯總模塊;其中,處理節(jié)點調(diào)度模塊通過有線或無線的方式分別與數(shù)據(jù)采集及預(yù)處理模塊、數(shù)據(jù)處理模塊連接,同時,數(shù)據(jù)處理模塊通過有線或無線的方式還與數(shù)據(jù)結(jié)果匯總模塊連接,本發(fā)明利用多因子分析技術(shù)對海量工業(yè)網(wǎng)絡(luò)數(shù)據(jù)進行簡化,MapReduce技術(shù)進行分布式處理,兩者相結(jié)合以達到對海量數(shù)據(jù)的高效處理,及時快速的反應(yīng)網(wǎng)絡(luò)當前狀態(tài)及進行威脅預(yù)判。??