支持自定義插件的動(dòng)態(tài)配置多數(shù)據(jù)庫(kù)分布式持久化方法

基本信息

申請(qǐng)?zhí)?/td> CN202011634276.7 申請(qǐng)日 -
公開(公告)號(hào) CN112667747B 公開(公告)日 2021-09-21
申請(qǐng)公布號(hào) CN112667747B 申請(qǐng)公布日 2021-09-21
分類號(hào) G06F16/27(2019.01)I;G06F16/28(2019.01)I;G06F16/23(2019.01)I;G06F9/445(2018.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 謝銘;鄭佳星;蒲路 申請(qǐng)(專利權(quán))人 北京賽思信安技術(shù)股份有限公司
代理機(jī)構(gòu) 北京永創(chuàng)新實(shí)專利事務(wù)所 代理人 祗志潔
地址 100125北京市朝陽(yáng)區(qū)霞光里8號(hào)承冀誠(chéng)大廈二層
法律狀態(tài) -

摘要

摘要 本發(fā)明是一種支持自定義插件的動(dòng)態(tài)配置多數(shù)據(jù)庫(kù)分布式持久化方法,對(duì)多數(shù)據(jù)庫(kù)引擎的海量數(shù)據(jù)存儲(chǔ)提供自動(dòng)化、可配置、統(tǒng)一化的高效數(shù)據(jù)接入。本發(fā)明方法包括:搭建包含多種存儲(chǔ)引擎、配置生成工具loadtool、數(shù)據(jù)持久化工具Pasca、Zookeeper和Kafka集群的數(shù)據(jù)平臺(tái);loadtool實(shí)現(xiàn)自動(dòng)化配置,上傳配置文件到Zookeeper;Pasca監(jiān)控Zookeeper以動(dòng)態(tài)更新配置;將接入的實(shí)時(shí)數(shù)據(jù)或離線數(shù)據(jù)發(fā)往Kafka集群,Pasca啟動(dòng)數(shù)據(jù)持久化通道,對(duì)接入的數(shù)據(jù)持久化。本發(fā)明具有自動(dòng)化、動(dòng)態(tài)配置、統(tǒng)一化優(yōu)點(diǎn),能方便的簡(jiǎn)單、靈活、高效的持久化數(shù)據(jù),充分利用大數(shù)據(jù)集群的存儲(chǔ)和計(jì)算資源。