一種基于多進(jìn)程的數(shù)據(jù)加載方法及裝置

基本信息

申請?zhí)?/td> CN202110584111.1 申請日 -
公開(公告)號 CN113448841A 公開(公告)日 2021-09-28
申請公布號 CN113448841A 申請公布日 2021-09-28
分類號 G06F11/36(2006.01)I;G06F16/22(2019.01)I;G06F16/2455(2019.01)I 分類 計算;推算;計數(shù);
發(fā)明人 楊飛 申請(專利權(quán))人 工銀科技有限公司
代理機(jī)構(gòu) 北京三友知識產(chǎn)權(quán)代理有限公司 代理人 董驍毅;葉明川
地址 100029北京市朝陽區(qū)安定路5號天圓祥泰大廈
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種基于多進(jìn)程的數(shù)據(jù)加載方法及裝置,可以應(yīng)用于金融領(lǐng)域,方法包括:根據(jù)預(yù)先構(gòu)建的SQL語句解析獲取的數(shù)據(jù)文件;對解析后的數(shù)據(jù)文件中的數(shù)據(jù)進(jìn)行清洗并插入測試表中;通過調(diào)用數(shù)據(jù)庫驅(qū)動的批量執(zhí)行函數(shù)對測試表中的數(shù)據(jù)進(jìn)行批量加載。本申請?zhí)峁┑姆椒ú粌H可以節(jié)約人力成本,還可以節(jié)約軟件采購成本,同時極大地提升數(shù)據(jù)庫運維效率,采用本方法的數(shù)據(jù)導(dǎo)入效率約為商業(yè)軟件的數(shù)百倍,實現(xiàn)了通過廉價手段提升數(shù)據(jù)加載效率的功能。