一種根據(jù)食譜生成食物圖像的方法

基本信息

申請?zhí)?/td> CN202010846696.5 申請日 -
公開(公告)號 CN112017255A 公開(公告)日 2020-12-01
申請公布號 CN112017255A 申請公布日 2020-12-01
分類號 G06T11/00(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 戴超;盛斌;潘思源;賀加原 申請(專利權(quán))人 上海志唐健康科技有限公司
代理機構(gòu) - 代理人 -
地址 200030上海市徐匯區(qū)樂山路33號1號樓211室
法律狀態(tài) -

摘要

摘要 本發(fā)明提供一種根據(jù)食譜生成食物圖像的方法,包括:輸入食物圖像和食譜,利用本發(fā)明提出的圖像文本嵌入模塊ITEM從食譜中提取特征并嵌入,再計算食物圖像和食譜的余弦相似度;利用本發(fā)明提出的CIGM生成低分辨率圖像;結(jié)合低分辨率圖像和文本特征通過CIGM生成高分辨率圖像,逐步訓練ITEM和CIGM,在訓練CIGM時,固定ITEM的值保持權(quán)重不變,在訓練CIGM時利用兩種損失函數(shù)計算方式:由判別器給出的文本圖像對語義一致性對抗損失函數(shù)和基于ITEM的文本語義損失函數(shù)。相比于現(xiàn)有根據(jù)食譜生成食物圖像的方案,本發(fā)明一種根據(jù)食譜生成食物圖像的方法,在視覺真實性和語義一致性方面都有更好的表現(xiàn)。??