一種基于多模態(tài)融合的醫(yī)學(xué)圖像識(shí)別系統(tǒng)及方法

基本信息

申請(qǐng)?zhí)?/td> CN201910070049.7 申請(qǐng)日 -
公開（公告）號(hào) CN109858540A 公開（公告）日 2019-06-07
申請(qǐng)公布號(hào) CN109858540A 申請(qǐng)公布日 2019-06-07
分類號(hào) G06K9/62（2006.01）I; G06N3/04（2006.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 韓云; 翟紅波 申請(qǐng)（專利權(quán)）人 青島中科智康醫(yī)療科技有限公司
代理機(jī)構(gòu) 成都弘毅天承知識(shí)產(chǎn)權(quán)代理有限公司 代理人 青島中科智康醫(yī)療科技有限公司
地址 266109 山東省青島市高新區(qū)火炬路100號(hào)盤谷創(chuàng)客空間D座206-22房間
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于多模態(tài)融合的醫(yī)學(xué)圖像識(shí)別系統(tǒng)及方法，涉及醫(yī)學(xué)圖像檢測(cè)領(lǐng)域，其系統(tǒng)包括用于構(gòu)建2D?CNN結(jié)構(gòu)獲取鉬靶圖特征，完成鉬靶圖識(shí)別的鉬靶圖識(shí)別模型、用于構(gòu)建CNN和LSTM結(jié)構(gòu)獲取B超序列特征，完成B超視頻序列識(shí)別的B超視頻序列識(shí)別模型、用于構(gòu)建3D?CNN獲取MRI序列特征，完成MRI序列識(shí)別的MRI序列識(shí)別模型和用于將鉬靶圖識(shí)別結(jié)果、B超視頻序列識(shí)別結(jié)果和MRI序列識(shí)別結(jié)果通過乘法進(jìn)行決策融合，獲取最終識(shí)別結(jié)果的多模態(tài)決策融合單元；本發(fā)明針對(duì)鉬靶、B超和MRI圖像的特性設(shè)計(jì)不同的結(jié)構(gòu)進(jìn)行訓(xùn)練，克服將三者特性完全不一致的圖像進(jìn)行結(jié)合的難點(diǎn)，將多維度識(shí)別結(jié)果通過乘法進(jìn)行決策融合，獲取更加全面和有效的特征，提高識(shí)別準(zhǔn)確度。