異構(gòu)數(shù)據(jù)源實時數(shù)據(jù)傳輸方法及系統(tǒng)、存儲介質(zhì)及終端

基本信息

申請?zhí)?/td> CN201911290817.6 申請日 -
公開(公告)號 CN112988702A 公開(公告)日 2021-06-18
申請公布號 CN112988702A 申請公布日 2021-06-18
分類號 G06F16/21;G06F16/27;G06F9/54 分類 計算;推算;計數(shù);
發(fā)明人 陳清陽;嚴永峰;張小虎;吳旭;劉宇;陳宏斌 申請(專利權(quán))人 天翼電子商務(wù)有限公司
代理機構(gòu) 上海光華專利事務(wù)所(普通合伙) 代理人 徐秋平
地址 102200 北京市昌平區(qū)未來科技城南區(qū)中國電信集團公司院內(nèi)
法律狀態(tài) -

摘要

摘要 本發(fā)明提供一種異構(gòu)數(shù)據(jù)源實時數(shù)據(jù)傳輸方法及系統(tǒng)、存儲介質(zhì)及終端,包括以下步驟:配置源數(shù)據(jù)庫和目標(biāo)數(shù)據(jù)庫之間的數(shù)據(jù)同步任務(wù);抓取全量數(shù)據(jù),并將所述全量數(shù)據(jù)寫入消息隊列;訂閱增量數(shù)據(jù)日志,并將增量數(shù)據(jù)寫入所述消息隊列;將所述消息隊列中的數(shù)據(jù)寫入到所述目標(biāo)數(shù)據(jù)庫中。本發(fā)明的異構(gòu)數(shù)據(jù)源實時數(shù)據(jù)傳輸方法及系統(tǒng)、存儲介質(zhì)及終端通過采用全量和增量數(shù)據(jù)同步結(jié)合的方式實現(xiàn)了不停機的數(shù)據(jù)遷移,且能夠避免數(shù)據(jù)丟失與重復(fù)傳輸,極大地提高了數(shù)據(jù)傳輸效率。