一種面向單機(jī)的海量小記錄高效存儲管理方法

基本信息

申請?zhí)?/td> CN201410617251.4 申請日 -
公開（公告）號 CN104536908A 公開（公告）日 2015-04-22
申請公布號 CN104536908A 申請公布日 2015-04-22
分類號 G06F12/06(2006.01)I;G06F12/08(2006.01)I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 戴林;邊彬彬;夏明雙;曹正德;于中徐;厲雅潔;張浩;陳永紅 申請（專利權(quán)）人 中安威士（北京）科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 100085 北京市海淀區(qū)上地三街9號嘉華大廈F座1006
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種面向單機(jī)的海量小記錄高效存儲管理方法，屬于信息存儲技術(shù)領(lǐng)域。包括：(1)數(shù)據(jù)接收及緩存：接收小記錄數(shù)據(jù)，并存儲在內(nèi)存緩沖區(qū)中；(2)自動分塊：當(dāng)內(nèi)存緩沖區(qū)滿時(shí)，將緩沖區(qū)內(nèi)的數(shù)據(jù)寫入到文件中，為防止單個(gè)文件太大影響性能，每個(gè)文件有大小限制，當(dāng)單個(gè)文件達(dá)到分塊大小時(shí)，自動新建文件；(3)樹狀目錄生成：為防止當(dāng)個(gè)目錄下文件太多影響性能，限制每個(gè)文件夾下面的文件總數(shù)，以簡化的樹管理算法實(shí)現(xiàn)文件夾和分塊文件的樹狀組織；(4)記錄標(biāo)識：采用特殊標(biāo)識直接記錄的物理地址，方便記錄的訪問。對比現(xiàn)有技術(shù)，本發(fā)明方法能夠在單機(jī)環(huán)境下以更低的硬件性能要求獲得更高性能的管理海量小記錄數(shù)據(jù)的能力。