港大研究員提出融合自適應法向量約束和遮擋注意力的深度估計新方法
下式顯示了優(yōu)化網(wǎng)絡的損失函數(shù),P(q)為位置q處的遮擋概率。損失函數(shù)綜合了遮擋概率作用下的深度、法向量以及遮擋概率圖,并用權(quán)重調(diào)節(jié)各部分的重要性:
實驗結(jié)果
在模型訓練過程中,研究人員使用了ScanNet作為訓練數(shù)據(jù),并在7Scenes和SUND3D數(shù)據(jù)集上進行了測試。訓練過程首先對DepthNet進行訓練,而后固定其權(quán)重再訓練RefineNet,最后再共同對整個模型進行調(diào)優(yōu)。
下圖顯示了這種方法與多種深度估計方法在7-Scenes數(shù)據(jù)上的比較,可以看到針對多個指標都取得了優(yōu)異的結(jié)果:
下圖顯示了模型重建的結(jié)果,可以看到深度圖中邊緣更為銳利、更好地保留了形狀的規(guī)則外形:
在得到的表面法向量上也達到了優(yōu)異性能:
在視覺質(zhì)量上也超過了其他方法,CNM約束可以更好的保留局部和全局的幾何結(jié)構(gòu)信息。
從最終的三維重建結(jié)果中可以看到,即便是對于像沙發(fā)、白墻這樣的弱紋理結(jié)構(gòu)也能輕松重建,重建的顏色也更接近于基準、形狀更為連續(xù)噪聲也更少。
此外研究人員還分析了局域/全局法向量CNM、優(yōu)化模塊和遮擋概率圖等不同模塊的有效性:

請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
-
8 每日AI全球觀察
- 1 特斯拉工人被故障機器人打成重傷,索賠3.6億
- 2 【行業(yè)深度研究】退居幕后四年后,張一鳴終于把算法公司變成AI公司?
- 3 AI 時代,阿里云想當“安卓” ,那誰是“蘋果”?
- 4 拐點已至!匯川領跑工控、埃斯頓份額第一、新時達海爾賦能扭虧為盈
- 5 硬剛英偉達!華為發(fā)布全球最強算力超節(jié)點和集群
- 6 隱退4年后,張一鳴久違現(xiàn)身!互聯(lián)網(wǎng)大佬正集體殺回
- 7 谷歌“香蕉”爆火啟示:國產(chǎn)垂類AI的危機還是轉(zhuǎn)機?
- 8 00后華裔女生靠兩部AI電影狂賺7.8億人民幣,AI正式進軍好萊塢
- 9 機器人9月大事件|3家國產(chǎn)機器人沖刺IPO,行業(yè)交付與融資再創(chuàng)新高!
- 10 美光:AI Capex瘋投不止,終于要拉起存儲超級周期了?
- 生產(chǎn)部總監(jiān) 廣東省/廣州市
- 資深管理人員 廣東省/江門市
- Regional Sales Manager 廣東省/深圳市
- 銷售總監(jiān) 廣東省/深圳市
- 結(jié)構(gòu)工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 自動化高級工程師 廣東省/深圳市
- 技術專家 廣東省/江門市
- 激光器高級銷售經(jīng)理 上海市/虹口區(qū)
- 封裝工程師 北京市/海淀區(qū)