一種基于超關(guān)系學習網(wǎng)絡(luò)的場景圖生成方法

基本信息

申請?zhí)?/td> CN202110309285.7 申請日 -
公開（公告）號 CN113065587A 公開（公告）日 2021-07-02
申請公布號 CN113065587A 申請公布日 2021-07-02
分類號 G06K9/62;G06N3/04;G06N3/08 分類 計算；推算；計數(shù);
發(fā)明人 俞俊;陳志;劉曉鵬;張健;張馳;詹憶冰 申請（專利權(quán)）人 人民日報社
代理機構(gòu) 杭州君度專利代理事務(wù)所（特殊普通合伙） 代理人 朱月芬
地址 310018 浙江省杭州市下沙高教園區(qū)2號大街
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種基于超關(guān)系學習的場景圖生成方法。本發(fā)明包括以下步驟：1、通過目標自注意力網(wǎng)絡(luò)加強目標交互，融合目標的特征。2、通過目標?關(guān)系注意力網(wǎng)絡(luò)加強目標和關(guān)系的交互，融合目標和關(guān)系之間的特征。3、通過超關(guān)系注意力網(wǎng)絡(luò)去整合超關(guān)系的傳遞推理。4、模型訓(xùn)練，將目標損失函數(shù)和關(guān)系損失函數(shù)放入優(yōu)化器，通過反向傳播算法對網(wǎng)絡(luò)參數(shù)進行梯度回傳和更新。本發(fā)明提出一種針對場景圖生成的深度神經(jīng)網(wǎng)絡(luò)，特別是提出一種超關(guān)系學習網(wǎng)絡(luò)，充分利用目標和關(guān)系之間的交互和傳遞推理，提高了場景圖生成中關(guān)系的推理能力，并且在場景圖生成領(lǐng)域中的性能得到了很大的提升。