一種AR設(shè)備的手勢3D關(guān)鍵點(diǎn)檢測方法、電子設(shè)備

基本信息

申請?zhí)?/td> CN202111218181.1 申請日 -
公開（公告）號 CN114066814A 公開（公告）日 2022-02-18
申請公布號 CN114066814A 申請公布日 2022-02-18
分類號 G06T7/00（2017.01）I;G06T3/00（2006.01）I;G06K9/62（2022.01）I;G06V10/80（2022.01）I;G06V10/46（2022.01）I;G06F17/15（2006.01）I;G06F3/01（2006.01）I 分類 計(jì)算；推算；計(jì)數(shù);
發(fā)明人 朱銘德;叢林 申請（專利權(quán)）人 杭州易現(xiàn)先進(jìn)科技有限公司
代理機(jī)構(gòu) 杭州創(chuàng)智卓英知識產(chǎn)權(quán)代理事務(wù)所（普通合伙） 代理人 張超
地址 311200浙江省杭州市蕭山區(qū)錢江世紀(jì)公園C區(qū)6幢102室
法律狀態(tài) -

摘要

摘要 本申請涉及一種AR設(shè)備的手勢3D關(guān)鍵點(diǎn)檢測方法，該方法包括：通過雙目相機(jī)獲取第一圖像和第二圖像，通過檢測網(wǎng)絡(luò)或前幀圖像獲取第一圖像的粗糙3D關(guān)鍵點(diǎn)，進(jìn)一步的，再通過優(yōu)化網(wǎng)絡(luò)再得到更加精確的優(yōu)化2D關(guān)鍵點(diǎn)信息，并根據(jù)該優(yōu)化2D關(guān)鍵點(diǎn)計(jì)算單目3D關(guān)鍵點(diǎn)。將單目3D關(guān)鍵點(diǎn)投影到第二圖像上，并通過優(yōu)化網(wǎng)絡(luò)獲取第二圖像的相對深度信息和2D關(guān)鍵點(diǎn)坐標(biāo)，最后，融合第一圖像和第二圖像的2D關(guān)鍵點(diǎn)坐標(biāo)計(jì)算雙目手勢3D關(guān)鍵點(diǎn)和手掌尺寸。通過本方法，解決了相關(guān)技術(shù)中手勢3D關(guān)鍵點(diǎn)預(yù)測結(jié)果精度較差的問題，同時(shí)兼顧了精度和效率。