一種數(shù)據(jù)上傳方法及系統(tǒng)

基本信息

申請?zhí)?/td> CN201611170890.6 申請日 -
公開（公告）號 CN106790511A 公開（公告）日 2017-05-31
申請公布號 CN106790511A 申請公布日 2017-05-31
分類號 H04L29/08(2006.01)I 分類 電通信技術(shù);
發(fā)明人 周文平;陳煜文;華中領(lǐng) 申請（專利權(quán)）人 北京酷成長科技有限公司
代理機構(gòu) 北京輕創(chuàng)知識產(chǎn)權(quán)代理有限公司 代理人 楊立
地址 273500 山東省濟寧市鄒城市崗山北路509號七樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種數(shù)據(jù)上傳方法及系統(tǒng)，該方法包括如下步驟，讀取數(shù)據(jù)文件，對數(shù)據(jù)文件進行數(shù)據(jù)分片操作、生成數(shù)據(jù)片段，對數(shù)據(jù)片段進行完整性管理操作；通過上傳數(shù)據(jù)片段的方式上傳數(shù)據(jù)文件；接收到數(shù)據(jù)片段后，校驗數(shù)據(jù)片段的完整性；該系統(tǒng)包括客戶端和服務器；客戶端包括讀取模塊、分片模塊、管理模塊及上傳模塊，服務器包括接收模塊和校驗模塊。本發(fā)明為超級計算提供一種高效、快速的數(shù)據(jù)上傳方法及系統(tǒng)，避免了數(shù)據(jù)重復上傳的問題，有效減少了數(shù)據(jù)傳輸時間，極大提高了大規(guī)模數(shù)據(jù)的上傳效率，進而使超算作業(yè)可以進行實時提交。