一種分布式系統(tǒng)中數(shù)據(jù)傳輸處理與存儲(chǔ)方法、系統(tǒng)及介質(zhì)

基本信息

申請(qǐng)?zhí)?/td> CN202210603936.8 申請(qǐng)日 -
公開（公告）號(hào) CN114697372A 公開（公告）日 2022-07-01
申請(qǐng)公布號(hào) CN114697372A 申請(qǐng)公布日 2022-07-01
分類號(hào) H04L67/133（2022.01）I;H04L67/10（2022.01）I 分類 電通信技術(shù);
發(fā)明人 齊澤青 申請(qǐng)（專利權(quán)）人 深圳市泛聯(lián)信息科技有限公司
代理機(jī)構(gòu) 佛山粵進(jìn)知識(shí)產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 -
地址 518000廣東省深圳市南山區(qū)粵海街道高新區(qū)社區(qū)科技南十二路007號(hào)九洲電器大廈B座301
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種分布式系統(tǒng)中數(shù)據(jù)傳輸處理與存儲(chǔ)方法、系統(tǒng)及介質(zhì)，包括：當(dāng)數(shù)據(jù)源產(chǎn)成數(shù)據(jù)后，生成遠(yuǎn)程過程調(diào)用發(fā)送至存儲(chǔ)計(jì)算集群，存儲(chǔ)計(jì)算集群收到調(diào)用后，選定任一存儲(chǔ)計(jì)算節(jié)點(diǎn)作為源存儲(chǔ)節(jié)點(diǎn)，通過遠(yuǎn)程內(nèi)存訪問讀取數(shù)據(jù)源的內(nèi)存并存儲(chǔ)在集群的存儲(chǔ)級(jí)內(nèi)存中；源存儲(chǔ)節(jié)點(diǎn)接收到第一份數(shù)據(jù)后給集群中分配的用于做數(shù)據(jù)冗余復(fù)制的第二個(gè)節(jié)點(diǎn)發(fā)送遠(yuǎn)程過程調(diào)用，冗余復(fù)制節(jié)點(diǎn)收到消息后，通過遠(yuǎn)程持久內(nèi)存訪問完成數(shù)據(jù)的遠(yuǎn)程復(fù)制，完成數(shù)據(jù)的高可用持久寫入；本發(fā)明實(shí)現(xiàn)了在當(dāng)前硬件下數(shù)據(jù)傳輸處理，存儲(chǔ)的過程中的最短數(shù)據(jù)拷貝、存儲(chǔ)路徑，高效流式數(shù)據(jù)處理及存儲(chǔ)，解決了當(dāng)前存儲(chǔ)和計(jì)算同步進(jìn)行時(shí)數(shù)據(jù)多次拷貝的時(shí)延，效率和資源浪費(fèi)問題。