基于多粒度學(xué)習(xí)的軟件界面元素檢測(cè)方法、系統(tǒng)、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)

基本信息

申請(qǐng)?zhí)?/td> CN201911411268.3 申請(qǐng)日 -
公開(kāi)(公告)號(hào) CN111104339A 公開(kāi)(公告)日 2020-05-05
申請(qǐng)公布號(hào) CN111104339A 申請(qǐng)公布日 2020-05-05
分類號(hào) G06F11/36;G06N3/04 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 胡立軍;唐琦松;林平;吳鑫;劉繼明 申請(qǐng)(專利權(quán))人 上海藝賽旗軟件股份有限公司
代理機(jī)構(gòu) 南京經(jīng)緯專利商標(biāo)代理有限公司 代理人 上海藝賽旗軟件股份有限公司
地址 201107 上海市閔行區(qū)申長(zhǎng)路1398弄1-4號(hào)阿里中心T2棟3樓
法律狀態(tài) -

摘要

摘要 本發(fā)明公開(kāi)了一種基于多粒度學(xué)習(xí)的軟件界面元素檢測(cè)與定位方法、系統(tǒng)、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì),本發(fā)明首先獲得操作界面圖像;將圖像輸入深度卷積神經(jīng)網(wǎng)絡(luò)提取特征,得到同等尺寸的中間結(jié)果;將中間結(jié)果進(jìn)行網(wǎng)格化劃分;輸入多粒度級(jí)聯(lián)背景判別器,檢測(cè)器會(huì)以網(wǎng)格為單位對(duì)中間圖像進(jìn)行背景網(wǎng)格的檢測(cè);剔除背景網(wǎng)格后,將剩余的網(wǎng)格部分輸多粒度的軟件界面元素檢測(cè)模型進(jìn)行軟件界面元素檢測(cè),輸出所要檢測(cè)的控件類型和區(qū)域大小。本發(fā)明所提出的多粒度級(jí)聯(lián)的背景網(wǎng)格檢測(cè)裝置能夠快速有效的找出背景網(wǎng)格,且提高了軟件界面元素檢測(cè)定位的效率和準(zhǔn)確度。