對(duì)賬系統(tǒng)中的大文件分布式處理方法及裝置

基本信息

申請(qǐng)?zhí)?/td> CN202111102977.0 申請(qǐng)日 -
公開(公告)號(hào) CN114020716A 公開(公告)日 2022-02-08
申請(qǐng)公布號(hào) CN114020716A 申請(qǐng)公布日 2022-02-08
分類號(hào) G06F16/182(2019.01)I;G06F16/172(2019.01)I;G06Q20/02(2012.01)N;G06Q20/08(2012.01)N 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 軒煥煥;吳龍偉 申請(qǐng)(專利權(quán))人 寶付網(wǎng)絡(luò)科技(上海)有限公司
代理機(jī)構(gòu) 上海海鈞知識(shí)產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 代理人 許蘭
地址 200231上海市徐匯區(qū)華涇路509號(hào)7幢227室
法律狀態(tài) -

摘要

摘要 本申請(qǐng)公開了對(duì)賬系統(tǒng)中的大文件分布式處理方法及裝置,適用于包括文件服務(wù)器和N個(gè)節(jié)點(diǎn)的集群中,每個(gè)節(jié)點(diǎn)對(duì)應(yīng)一個(gè)應(yīng)用服務(wù)器,所述文件服務(wù)器為所述N個(gè)節(jié)點(diǎn)中的至少一個(gè)提供對(duì)賬文件。所述方法對(duì)賬文件處理采用集群部署,通過算法將文件進(jìn)行邏輯劃分,分成若干塊,將邏輯分片后的文件內(nèi)容分配到集群中相應(yīng)的節(jié)點(diǎn),各節(jié)點(diǎn)分別處理各自的任務(wù),有效地規(guī)避傳統(tǒng)方案中硬件不足、處理效率慢等弊端,讓大文件的處理在硬件配置較低的虛擬機(jī)、或者云服務(wù)器上也能快速處理,便于應(yīng)用程序的微服務(wù)化,另外通過分布式改造后,徹底解決了單點(diǎn)不穩(wěn)定的潛在風(fēng)險(xiǎn)。