SIGGRAPH即將到來，這意味著像Facebook Reality Lab這樣的研究小組正在開始展示他們的一些前沿工作。FRL(前身為Oculus Research)的最新作品展示了一種捕捉現(xiàn)實世界鏡子外觀的方法。

這項 新研究 為捕捉具有鏡子和反射表面的復雜現(xiàn)實世界環(huán)境的外觀打開了大門。鏡子是許多計算機視覺應用程序的敵人，如果Facebook的研究可以用來幫助解決這個問題，它可能最終會導致許多有用的應用程序。

“鏡子和玻璃表面是我們日常環(huán)境的重要組成部分，但卻很難掃描。從穩(wěn)健檢測反射平面目標的簡單思想開始，我們展示了一個完整的系統(tǒng)，用于對鏡子和玻璃表面的場景進行穩(wěn)健和精確的重建，“ 報告中寫道。“鑒于易于捕獲，我們的系統(tǒng)還可用于收集基于學習的方法的訓練數(shù)據(jù)，以檢測反射表面。除了掃描室內場景的核心應用外，我們還設想了多種擴展和應用。“

系統(tǒng)通過查找攝像機裝備上的目標來查找鏡像，然后通過分析圖像的各種特征來細化鏡像的形狀。

“我們的主要想法是在捕捉裝置上添加一個標簽，只有在相機面向鏡子或玻璃表面時才能觀察到，”報告中寫道。

最明顯的應用程序更容易捕獲在VR中體驗更真實的環(huán)境。即使有許多鏡子和反射表面，這項研究也可以使現(xiàn)實世界的場景表現(xiàn)形式更加逼真地與數(shù)字元素(如你的化身)混合。

研究科學家Thomas Whelan在一篇Oculus博客文章中說：“鏡子通常在三維重建過程中被繞過，大多數(shù)早期作品只是假裝它們不存在而忽略它們。” “但在現(xiàn)實世界中，它們遍布各處并破壞了大多數(shù)重建方法。所以在某種程度上，我們打破了模具，正面解決了3D重建中最古老的問題之一。