應(yīng)用于實時大數(shù)據(jù)場景下的數(shù)據(jù)庫系統(tǒng)

基本信息

申請?zhí)?/td> CN201510237342.X 申請日 -
公開（公告）號 CN104834719A 公開（公告）日 2015-08-12
申請公布號 CN104834719A 申請公布日 2015-08-12
分類號 G06F17/30(2006.01)I 分類 計算；推算；計數(shù);
發(fā)明人 劉彤 申請（專利權(quán)）人 北京比酷天地文化股份有限公司
代理機(jī)構(gòu) 北京世譽(yù)鑫誠專利代理事務(wù)所（普通合伙） 代理人 北京比酷天地文化股份有限公司
地址 102200 北京市昌平區(qū)科技園區(qū)振興路28號2號樓218
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種應(yīng)用于實時大數(shù)據(jù)場景下的數(shù)據(jù)庫系統(tǒng)，其特征在于，包括：用于限定抓取數(shù)據(jù)源的范圍，自動抓取網(wǎng)頁數(shù)據(jù)，并進(jìn)行內(nèi)容抽取、排重、上下文分析工作的數(shù)據(jù)抓取模塊；用于保存Cookie數(shù)據(jù)、廣告位數(shù)據(jù)和鏈接數(shù)據(jù)的特征數(shù)據(jù)庫模塊；用于對特征數(shù)據(jù)庫模塊中的數(shù)據(jù)進(jìn)行索引和分片存儲的實時數(shù)據(jù)庫模塊；以及用于從實時數(shù)據(jù)庫模塊中獲得廣告特征數(shù)據(jù)，與特征數(shù)據(jù)庫模塊中的數(shù)據(jù)進(jìn)行匹配，最終決定是否投放廣告給特定用戶以及投放哪一條廣告給用戶的廣告投放模塊。本發(fā)明的有益之處在于：由于采用了內(nèi)存－SSD－硬盤三級存儲結(jié)構(gòu)，所以本發(fā)明的系統(tǒng)不僅提供了高速的實時數(shù)據(jù)訪問能力，而且能夠有效應(yīng)對超大規(guī)模的數(shù)據(jù)存儲和容災(zāi)能力。