一種Redshift外部表動(dòng)態(tài)列的處理方法及裝置

基本信息

申請(qǐng)?zhí)?/td> CN201910565114.3 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN110297830B 公開(kāi)(公告)日 2021-09-14
申請(qǐng)公布號(hào) CN110297830B 申請(qǐng)公布日 2021-09-14
分類(lèi)號(hào) G06F16/22 分類(lèi) 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 朱亮;徐瀅 申請(qǐng)(專(zhuān)利權(quán))人 成都品果科技有限公司
代理機(jī)構(gòu) 成都高遠(yuǎn)知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 代理人 曾克;施磊
地址 610000 四川省成都市高新區(qū)天府大道中段1268號(hào)1棟13層
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)一種Redshift外部表動(dòng)態(tài)列的處理方法及裝置,包括:加載Redshift外部表的第一表頭信息;所述第一表頭信息包括:外部表的列名稱(chēng),所述列名稱(chēng)與待存儲(chǔ)的SparkDataFrame列的映射關(guān)系,所述列名稱(chēng)的使用情況;根據(jù)所述第一表頭信息,將所述Redshift外部表的列與所述待存儲(chǔ)的SparkDataFrame的列進(jìn)行一一映射,生成Redshift外部表的第二表頭信息;根據(jù)所述第二表頭信息,更新所述待存儲(chǔ)的SparkDataFrame的表頭結(jié)構(gòu),獲取更新后的SparkDataFrame;將所述更新后的SparkDataFrame存儲(chǔ)于所述Redshift外部表。本發(fā)明提供的技術(shù)方案,能夠動(dòng)態(tài)地改變Redshift外部表的列結(jié)構(gòu),簡(jiǎn)化操作。