一種IndexR實(shí)時(shí)數(shù)據(jù)分析庫

基本信息

申請(qǐng)?zhí)?/td> CN201710355812.1 申請(qǐng)日 -
公開（公告）號(hào) CN107133342A 公開（公告）日 2017-09-05
申請(qǐng)公布號(hào) CN107133342A 申請(qǐng)公布日 2017-09-05
分類號(hào) G06F17/30(2006.01)I;G06Q30/02(2012.01)I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 李華煜;韋萬 申請(qǐng)（專利權(quán)）人 廣州舜飛信息科技有限公司
代理機(jī)構(gòu) 北京華仲龍騰專利代理事務(wù)所（普通合伙） 代理人 廣州舜飛信息科技有限公司
地址 510000 廣東省廣州市天河區(qū)棠東東路5號(hào)商業(yè)(部位:B-425)
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種IndexR實(shí)時(shí)數(shù)據(jù)分析庫；IndexR實(shí)時(shí)數(shù)據(jù)分析庫實(shí)現(xiàn)了一種可部署于分布式環(huán)境，可并行化處理，帶索引的，列式的結(jié)構(gòu)化數(shù)據(jù)格式?；谶@種數(shù)據(jù)格式，IndexR構(gòu)建了一個(gè)數(shù)據(jù)倉庫系統(tǒng)(Data?Warehouse)，基于Hadoop生態(tài)，可以對(duì)海量數(shù)據(jù)集做快速統(tǒng)計(jì)分析(OLAP)，數(shù)據(jù)可實(shí)時(shí)導(dǎo)入并且對(duì)于查詢零延遲。IndexR為解決大數(shù)據(jù)場(chǎng)景下分析緩慢、數(shù)據(jù)延遲、系統(tǒng)復(fù)雜等問題而設(shè)計(jì)。本發(fā)明的IndexR實(shí)時(shí)數(shù)據(jù)分析庫把數(shù)據(jù)存放于HDFS，使用Zookeeper在集群中通訊和交涉，使用Hive方便的管理分區(qū)數(shù)據(jù)，可以通過Kafka高速實(shí)時(shí)導(dǎo)入數(shù)據(jù)，查詢層使用優(yōu)秀的分布式查詢引擎Apache?Drill。