Skoltech ADASE(科學(xué)和工程學(xué)中的高級(jí)數(shù)據(jù)分析)實(shí)驗(yàn)室的科學(xué)家們發(fā)現(xiàn)了一種增強(qiáng)深度圖分辨率的方法，該方法應(yīng)該使虛擬現(xiàn)實(shí)和計(jì)算機(jī)圖形更加逼真。他們?cè)陬H負(fù)盛名的2019年國際計(jì)算機(jī)視覺國際會(huì)議上展示了他們的研究結(jié)果。

拍攝照片時(shí)，我們捕獲有關(guān)我們周圍物體的視覺信息，圖像中的不同像素包含物體各個(gè)部分的顏色。深度圖是捕獲空間信息的照片，其像素包含從相機(jī)到空間中各個(gè)點(diǎn)的距離。諸如計(jì)算機(jī)圖形和增強(qiáng)現(xiàn)實(shí)或虛擬現(xiàn)實(shí)之類的應(yīng)用程序使用空間信息來重構(gòu)3D對(duì)象的形狀，例如將其顯示在計(jì)算機(jī)屏幕上。

深度相機(jī)的問題之一是其分辨率，即距離測(cè)量的空間頻率，不足以恢復(fù)物體的高質(zhì)量形狀，從而使虛擬重建看起來幾乎是不現(xiàn)實(shí)的。

研究人員面臨著尋找從低分辨率深度圖獲取高分辨率深度圖的方法的挑戰(zhàn)。

Skoltech ADASE實(shí)驗(yàn)室的科學(xué)家建議使用與人類感知密切相關(guān)的新方法評(píng)估重建質(zhì)量。用這種質(zhì)量評(píng)估技術(shù)訓(xùn)練人工神經(jīng)網(wǎng)絡(luò)可產(chǎn)生深度圖超分辨率方法，該方法在結(jié)果的視覺質(zhì)量上大大優(yōu)于現(xiàn)有方法。

“處理超分辨深度圖時(shí)，應(yīng)評(píng)估結(jié)果的質(zhì)量，首先比較不同方法的性能，其次，將其用作進(jìn)一步改進(jìn)的反饋。最簡(jiǎn)單的方法是將結(jié)果與某些方法進(jìn)行比較為此目的，絕大多數(shù)有關(guān)深度圖超分辨率的工作都意味著超分辨深度值和參考深度值之間的差異，這種方法決不能反映從超分辨率獲得的3D重建的視覺質(zhì)量。解析的深度圖。”該研究的第一作者Oleg Voynov解釋說。

“我們提出了一種完全不同的方法，該方法利用了人類對(duì)從超分辨深度圖和參考深度圖獲得的3D重建可視化之間差異的感知。通過此方法獲得的圖形看起來非常真實(shí)。我們希望我們的方法將會(huì)被廣泛使用。”其中一位開發(fā)人員Alexey Artemov說。