ETL數(shù)據(jù)同步方法及裝置、電子設(shè)備、存儲介質(zhì)

基本信息

申請?zhí)?/td> CN202011103171.9 申請日 -
公開（公告）號 CN112291312B 公開（公告）日 2022-07-01
申請公布號 CN112291312B 申請公布日 2022-07-01
分類號 H04L67/06（2022.01）I;H04L67/565（2022.01）I;H04L67/30（2022.01）I;H04L67/1095（2022.01）I;G06F16/25（2019.01）I;G06F16/27（2019.01）I 分類 電通信技術(shù);
發(fā)明人 褚占峰;鄭高;江峰;陳世興 申請（專利權(quán)）人 杭州數(shù)夢工場科技有限公司
代理機構(gòu) 北京博思佳知識產(chǎn)權(quán)代理有限公司 代理人 -
地址 310024浙江省杭州市轉(zhuǎn)塘科技經(jīng)濟(jì)區(qū)塊16號4幢326室
法律狀態(tài) -

摘要

摘要 本申請?zhí)峁┮环NETL數(shù)據(jù)同步方法及裝置、電子設(shè)備、存儲介質(zhì)；該方法應(yīng)用于下游ETL服務(wù)器，該方法可以包括以下步驟：獲取上游ETL服務(wù)器發(fā)送的經(jīng)由網(wǎng)閘轉(zhuǎn)發(fā)的配置文件，所述配置文件由所述上游ETL服務(wù)器根據(jù)預(yù)設(shè)轉(zhuǎn)換規(guī)則對ETL任務(wù)進(jìn)行轉(zhuǎn)換得到；獲取所述上游ETL服務(wù)器發(fā)送的經(jīng)由網(wǎng)閘轉(zhuǎn)發(fā)的傳輸文件，所述傳輸文件由所述上游ETL服務(wù)器根據(jù)所述ETL任務(wù)對待同步數(shù)據(jù)進(jìn)行格式轉(zhuǎn)換得到；通過所述預(yù)設(shè)轉(zhuǎn)換規(guī)則將所述配置文件解析為ETL任務(wù)，并通過解析得到的ETL任務(wù)將所述傳輸文件還原為所述待同步數(shù)據(jù)。通過本申請的技術(shù)方案，下游ETL服務(wù)器可以基于接收到的配置文件自動生成ETL任務(wù)，避免了相關(guān)技術(shù)中需在網(wǎng)閘兩側(cè)的ETL服務(wù)器分別配置ETL任務(wù)而造成的操作繁瑣的問題。