一種數(shù)據(jù)文件上傳處理方法和系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN202210147890.3 申請(qǐng)日 -
公開（公告）號(hào) CN114546955A 公開（公告）日 2022-05-27
申請(qǐng)公布號(hào) CN114546955A 申請(qǐng)公布日 2022-05-27
分類號(hào) G06F16/16（2019.01）I;G06F16/172（2019.01）I;H04L67/06（2022.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 曾覺銳;丁佳軍;鄭祥康;葉正卿;魏美鐘 申請(qǐng)（專利權(quán)）人 杭州每刻科技有限公司
代理機(jī)構(gòu) 杭州裕陽聯(lián)合專利代理有限公司 代理人 -
地址 310000浙江省杭州市錢塘新區(qū)萬晶湖畔中心西區(qū)2幢1501室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種數(shù)據(jù)文件上傳處理方法和系統(tǒng)，所述方法包括入下步驟：獲取前端數(shù)據(jù)文件，將所述數(shù)據(jù)文件分片斷點(diǎn)上傳至OSS平臺(tái)；生成所述數(shù)據(jù)文件的上傳記錄列表，所述上傳記錄列表包含文件id；調(diào)用RocketMQ將所述文件id發(fā)送到異步消息服務(wù)器；所述異步消息服務(wù)器分批下載所述OSS平臺(tái)的數(shù)據(jù)文件，并執(zhí)行所述數(shù)據(jù)文件的異步處理。所述方法和系統(tǒng)提供了一種異步處理的大數(shù)據(jù)的文件處理方法，可以降低系統(tǒng)的復(fù)雜度，并且使得消息上傳和數(shù)據(jù)處理之間進(jìn)行行為解耦，提高了文件上傳系統(tǒng)的復(fù)用能力和水平擴(kuò)容能力。