自動(dòng)生成音效并匹配視頻的方法、系統(tǒng)、裝置及存儲(chǔ)介質(zhì)

基本信息

申請(qǐng)?zhí)?/td> CN202010518573.9 申請(qǐng)日 -
公開(公告)號(hào) CN111681678A 公開(公告)日 2020-09-18
申請(qǐng)公布號(hào) CN111681678A 申請(qǐng)公布日 2020-09-18
分類號(hào) G10L25/51(2013.01)I 分類 樂器;聲學(xué);
發(fā)明人 薛媛;金若熙 申請(qǐng)(專利權(quán))人 杭州星合尚世影視傳媒有限公司
代理機(jī)構(gòu) 杭州五洲普華專利代理事務(wù)所(特殊普通合伙) 代理人 張瑜
地址 310000浙江省杭州市江干區(qū)九華路1號(hào)8幢5樓507室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開一種自動(dòng)生成音效并匹配視頻的方法,包括基于待處理的視頻,降頻抽取視頻關(guān)鍵幀并進(jìn)行初步識(shí)別分析處理,得到模塊化的特定發(fā)聲物體;對(duì)模塊化的特定發(fā)聲物體通過深度殘差網(wǎng)絡(luò)模型進(jìn)行多級(jí)識(shí)別分析處理,得到特定發(fā)聲物體的種類并提取其發(fā)聲特征;基于發(fā)聲特征構(gòu)建特定發(fā)聲物體的物體類別和特定發(fā)聲物體音頻,音頻包括音頻介紹和音頻關(guān)鍵詞;基于特定發(fā)聲物體的物體類別和音頻得到視頻音頻匹配分?jǐn)?shù),根據(jù)視頻音頻匹配分?jǐn)?shù)將特定發(fā)聲物體與音頻進(jìn)行搜索匹配,使得音頻介紹、音頻關(guān)鍵詞與特定發(fā)聲物體的物體類別相互匹配。給視頻配音時(shí)不需要借助擬音師來進(jìn)行特效配音,能直接自動(dòng)生成音效并且匹配到相應(yīng)的視頻中,方便快捷,準(zhǔn)確率高。??