Facebook Inc.的Oculus虛擬現(xiàn)實(shí)團(tuán)隊(duì)今天將其DeepFocus軟件背后的代碼開源，該軟件用于為VR頭盔創(chuàng)建更逼真的視覺效果。

DeepFocus軟件于5月首次引起公眾關(guān)注，當(dāng)時(shí)Oculus展示了一款名為Half Dome的新VR原型耳機(jī)。原型耳機(jī)具有“可變焦”顯示屏，可在設(shè)備內(nèi)部移動(dòng)屏幕，以模仿用戶的眼睛如何切換焦點(diǎn)。

DeepFocus正在嘗試使用VR頭戴式耳機(jī)解決一種現(xiàn)象，即“聚散-容納沖突”，這種現(xiàn)象是由于顯示器離觀看者的眼睛太近而引起的。這種“沖突”發(fā)生在眼睛指向的地方和眼球的透鏡聚焦的地方之間。這可能會(huì)限制某些人佩戴VR耳機(jī)而不會(huì)感到某種不適的時(shí)間。

“我們的眼睛就像微型相機(jī)：當(dāng)它們聚焦在給定的物體上時(shí)，場(chǎng)景中不同深度的部分看起來(lái)很模糊，”從事DeepFocus項(xiàng)目的Facebook Reality Labs視覺科學(xué)家Marina Zannoli寫道。Oculus團(tuán)隊(duì)的博客文章。那些模糊的區(qū)域可以幫助我們的視覺系統(tǒng)理解世界的三維結(jié)構(gòu)，并幫助我們決定下一步將焦點(diǎn)放在哪里。雖然可變焦VR頭戴設(shè)備可以在觀看者所看到的任何地方提供清晰的圖像，但DeepFocus允許我們按照真實(shí)世界中的外觀來(lái)渲染其余場(chǎng)景：自然模糊。

DeepFocus通過(guò)使用人工智能軟件創(chuàng)建所謂的“散焦效果”來(lái)幫助解決VAC問(wèn)題，從而使圖像的一部分顯得比其他部分清晰。Oculus的研究人員說(shuō)，這有助于減少不必要的眼睛疲勞和視覺疲勞，對(duì)于希望整天沉浸在VR中的人來(lái)說(shuō)至關(guān)重要。

Oculus在一篇技術(shù)論文中說(shuō)，DeepFocus是第一個(gè)可以實(shí)時(shí)產(chǎn)生散焦效果的軟件，它可以使用戶當(dāng)前未聚焦的圖像的每個(gè)部分產(chǎn)生逼真的模糊效果，類似于人眼的實(shí)際工作方式。Oculus研究人員說(shuō)，這個(gè)想法是“忠實(shí)地再現(xiàn)光線照射到人類視網(wǎng)膜上的方式”。

實(shí)時(shí)創(chuàng)建散焦效果涉及將深度學(xué)習(xí)工具與VR游戲引擎提供的顏色和深度數(shù)據(jù)配對(duì)。研究團(tuán)隊(duì)創(chuàng)建了196,000個(gè)對(duì)象的隨機(jī)圖像，使用它們來(lái)訓(xùn)練系統(tǒng)以根據(jù)耳機(jī)佩戴者聚焦的圖像部分正確地渲染模糊。

Oculus研究科學(xué)家Anton Kaplanyan說(shuō)：“通過(guò)深度學(xué)習(xí)，我們的系統(tǒng)能夠掌握復(fù)雜的效果和關(guān)系，例如前景和背景散焦，以及遮擋邊界處的正確模糊。” “通過(guò)生成豐富的地面實(shí)況示例數(shù)據(jù)庫(kù)，我們能夠涵蓋更廣泛的散焦效果，并為景深合成設(shè)定了新的標(biāo)準(zhǔn)。”

Oculus團(tuán)隊(duì)表示，做出開源DeepFocus的決定是為了讓更廣泛的VR系統(tǒng)開發(fā)人員，視覺科學(xué)家和感知研究人員可以從其知識(shí)中受益。顯而易見的好處是開發(fā)人員將能夠?yàn)閂R系統(tǒng)構(gòu)建更好的應(yīng)用程序，但是尚不清楚Oculus何時(shí)計(jì)劃發(fā)布其Half Dome頭戴式耳機(jī)。Oculus只會(huì)說(shuō)DeepFocus軟件對(duì)下一代VR頭戴式耳機(jī)設(shè)計(jì)很有用。