一種異構(gòu)數(shù)據(jù)實(shí)時(shí)采集的方法
基本信息
| 申請(qǐng)?zhí)?/td> | CN201910534200.8 | 申請(qǐng)日 | - |
| 公開（公告）號(hào) | CN110297871A | 公開（公告）日 | 2019-10-01 |
| 申請(qǐng)公布號(hào) | CN110297871A | 申請(qǐng)公布日 | 2019-10-01 |
| 分類號(hào) | G06F16/28;H04L12/24;H04L29/06;H04L29/08 | 分類 | 計(jì)算；推算；計(jì)數(shù); |
| 發(fā)明人 | 顧凌云;王偉;李軍軍;李海全;張力華 | 申請(qǐng)（專利權(quán)）人 | 常州冰鑒信息科技有限公司 |
| 代理機(jī)構(gòu) | 常州佰業(yè)騰飛專利代理事務(wù)所（普通合伙） | 代理人 | 常州冰鑒信息科技有限公司 |
| 地址 | 213164 江蘇省常州市武進(jìn)區(qū)常州科教城中科創(chuàng)業(yè)中心A-1-904室 | ||
| 法律狀態(tài) | - | ||
摘要
| 摘要 | 本發(fā)明公開了一種異構(gòu)數(shù)據(jù)實(shí)時(shí)采集的方法，屬于大數(shù)據(jù)技術(shù)領(lǐng)域，包括建立數(shù)個(gè)代理服務(wù)器、數(shù)個(gè)對(duì)接服務(wù)器和管理服務(wù)器，在每一個(gè)代理服務(wù)器中均建立一個(gè)或多個(gè)Agent組件，在每一個(gè)對(duì)接服務(wù)器中均建立一個(gè)或多個(gè)Sink組件，在管理服務(wù)器中建立MQ日志隊(duì)列和配置頁(yè)面，解決了數(shù)據(jù)采集不及時(shí)以及采集時(shí)間點(diǎn)集中影響業(yè)務(wù)系統(tǒng)的技術(shù)問題，本發(fā)明將對(duì)不同數(shù)據(jù)源的實(shí)時(shí)采集,底層采用不同的技術(shù),但是在上層是統(tǒng)一的管理和操作方法，通過實(shí)時(shí)分析數(shù)據(jù)庫(kù)日志來采集數(shù)據(jù)的方式，本發(fā)明為了解決傳輸性能和可靠采用的數(shù)據(jù)封包協(xié)議。 |
