一種中文線索語生成方法、系統(tǒng)、計算機設備及存儲介質(zhì)

基本信息

申請?zhí)?/td> CN202210234048.3 申請日 -
公開（公告）號 CN114626339A 公開（公告）日 2022-06-14
申請公布號 CN114626339A 申請公布日 2022-06-14
分類號 G06F40/126（2020.01）I;G06F3/01（2006.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I;G06V40/20（2022.01）I 分類 計算；推算；計數(shù);
發(fā)明人 劉李;馮鋼 申請（專利權(quán)）人 深圳市大數(shù)據(jù)研究院
代理機構(gòu) 深圳市恒和大知識產(chǎn)權(quán)代理有限公司 代理人 -
地址 518000廣東省深圳市龍崗區(qū)龍城街道龍翔大道2001號道遠樓225室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種中文線索語生成方法、系統(tǒng)、計算機設備及存儲介質(zhì)，其方法包括：分析并確定待編碼元音以及待編碼輔音；采集待編碼元音以及所述待編碼輔音對應的唇讀視頻數(shù)據(jù)集，將唇讀視頻數(shù)據(jù)集轉(zhuǎn)換為多張圖片；將圖片輸入到預設卷積神經(jīng)網(wǎng)絡模型中進行計算，獲取每個待編碼元音或待編碼輔音對應的內(nèi)嘴唇參數(shù)；將內(nèi)嘴唇參數(shù)輸入至預設高斯模型中進行計算，確定每個待編碼元音對應的手部編碼位置，及每個待編碼輔音對應的手形；通過頭部運動狀態(tài)對音調(diào)進行編碼，獲取每個頭部運行狀態(tài)對應的音調(diào)，以形成手部編碼位置以及手形，配合頭部的運動狀態(tài)的中文線索語。提供了一套魯棒、高效，優(yōu)化的中文線索語。