三星的三名研究人員創(chuàng )建了一種AI，該AI可以生成逼真的3D視頻場(chǎng)景渲染。

在一篇詳細介紹AI背后的神經(jīng)網(wǎng)絡(luò )的論文中，研究人員解釋了當今創(chuàng )建虛擬場(chǎng)景的低效率過(guò)程：

創(chuàng )建真實(shí)場(chǎng)景的虛擬模型通常涉及很長(cháng)的操作流程。此類(lèi)建模通常從掃描過(guò)程開(kāi)始，在此過(guò)程中，使用相機圖像捕獲光度特性，并使用深度掃描儀或密集立體匹配捕獲原始場(chǎng)景的幾何形狀。

后一個(gè)過(guò)程通常會(huì )提供嘈雜且不完整的點(diǎn)云，需要通過(guò)應用某些曲面重建和網(wǎng)格劃分方法來(lái)對其進(jìn)行進(jìn)一步處理。給定網(wǎng)格，紋理化和材料估計過(guò)程將確定表面碎片的光度特性，并將其以2D參數化貼圖的形式存儲，例如紋理貼圖，凹凸貼圖，與視圖相關(guān)的紋理，表面光場(chǎng)。

最后，生成建模場(chǎng)景的逼真的視圖涉及繁重的計算過(guò)程，例如光線(xiàn)跟蹤和/或輻射傳遞估計。”

視頻輸入被轉換為代表場(chǎng)景幾何形狀的點(diǎn)。然后使用神經(jīng)網(wǎng)絡(luò )將這些幾何點(diǎn)渲染為計算機圖形，極大地加快了渲染逼真的3D場(chǎng)景的過(guò)程。

這是AI創(chuàng )建的3D場(chǎng)景的視頻結果：

這樣的解決方案有一天可以幫助游戲開(kāi)發(fā)，尤其是已經(jīng)拍攝的電影的視頻游戲。影片中的鏡頭可以為游戲開(kāi)發(fā)人員提供可復制的3D環(huán)境，以便在其中創(chuàng )建交互式體驗?；蛘?，也許您可??以?xún)H使用舊視頻和VR耳機重現諸如婚禮之類(lèi)的事件。

在達到這一點(diǎn)之前，仍然需要進(jìn)行一些改進(jìn)。當前場(chǎng)景無(wú)法更改，并且與原始視點(diǎn)的任何較大偏差都會(huì )導致偽像。盡管如此，對于在不那么遙遠的將來(lái)可能發(fā)生的事情，這仍是令人著(zhù)迷的早期見(jiàn)識。