一種基于Storm的流數(shù)據(jù)實時智能化處理框架

基本信息

申請?zhí)?/td> CN201510625570.4 申請日 -
公開（公告）號 CN105512162B 公開（公告）日 2019-04-16
申請公布號 CN105512162B 申請公布日 2019-04-16
分類號 G06F16/2455（2019.01）I; G06F16/2458（2019.01）I; G06F16/25（2019.01）I 分類 計算；推算；計數(shù);
發(fā)明人 金蒼宏; 劉澤民; 吳明暉; 應(yīng)晶 申請（專利權(quán)）人 杭州圓橙科技有限公司
代理機構(gòu) 杭州宇信知識產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 杭州圓橙科技有限公司
地址 310016 浙江省杭州市上城區(qū)海潮路53號274室
法律狀態(tài) -

摘要

摘要 本發(fā)明涉及一種基于Storm的流數(shù)據(jù)實時智能化處理框架，包括如下步驟：需求配置層完成前端數(shù)據(jù)結(jié)構(gòu)及過濾條件的設(shè)定；數(shù)據(jù)結(jié)構(gòu)解析層完成包括SQL指令等的配置文件中數(shù)據(jù)的解析；算子功能拓?fù)鋵油瓿蒘torm的Topology的功能算子解析；系統(tǒng)完成層完成代碼生成及編譯打包等功能，并把最終的Topology提交執(zhí)行；數(shù)據(jù)畫像層完成結(jié)果數(shù)據(jù)在數(shù)據(jù)倉庫中的存儲，及數(shù)據(jù)畫像的實時生成并展示給決策者。本發(fā)明的實施具有以下有益效果：能夠很好地與上層決策者交互，并依照復(fù)雜數(shù)據(jù)處理功能的設(shè)定動態(tài)智能的生成相關(guān)Topology，提高代碼復(fù)用性，并使得開發(fā)周期和成本大大降低，提升系統(tǒng)智能化和可執(zhí)行效率，并實時的展示用戶畫像，為前端決策人員的決策提供快速且強有力的支持。