基于海量用戶行為數(shù)據(jù)的高速計(jì)算分析方法

基本信息

申請?zhí)?/td> CN201410345089.5 申請日 -
公開(公告)號 CN105302831A 公開(公告)日 2016-02-03
申請公布號 CN105302831A 申請公布日 2016-02-03
分類號 G06F17/30(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 李馥岑;孫鑫;張旭明 申請(專利權(quán))人 上海星紅安數(shù)據(jù)科技有限公司
代理機(jī)構(gòu) - 代理人 -
地址 200241 上海市閔行區(qū)東川路555號乙樓B2054
法律狀態(tài) -

摘要

摘要 本發(fā)明主要解決的是面對越來越靈活的雙向新媒體業(yè)務(wù),面對百萬級,甚至千萬級用戶的海量行為數(shù)據(jù),將采集到的用戶行為數(shù)據(jù)進(jìn)行HDFS分布式存儲,經(jīng)過ETL模塊對數(shù)據(jù)進(jìn)行提取、轉(zhuǎn)換和加載之后,由符合傳媒行業(yè)特點(diǎn)的優(yōu)化組合算法模塊,將海量的用戶行為數(shù)據(jù)進(jìn)行高效的數(shù)據(jù)預(yù)處理,形成一系列的中間結(jié)果數(shù)據(jù),再通過不同的WEB應(yīng)用程序調(diào)用相關(guān)的中間結(jié)果數(shù)據(jù)集,以實(shí)現(xiàn)對海量用戶行為數(shù)據(jù)的高速分析運(yùn)算,為運(yùn)營商提供秒級的實(shí)時計(jì)算分析。