英偉達(dá)用AI生成交互式3D虛擬場(chǎng)景，自動(dòng)構(gòu)建虛擬世界

英偉達(dá) 今天推出了一項(xiàng)突破性的人工智能研究，開(kāi)發(fā)者首次可以通過(guò)一個(gè)根據(jù)真實(shí)世界視頻訓(xùn)練的模型來(lái)渲染完全合成的交互式3D環(huán)境。

研究人員利用神經(jīng)網(wǎng)絡(luò)來(lái)實(shí)時(shí)渲染一個(gè)合成的3D環(huán)境。就目前而言，虛擬世界中的每一個(gè)對(duì)象都需要單獨(dú)建模，而這個(gè)過(guò)程成本高昂且十分耗時(shí)。與之相比，英偉達(dá)采用了一個(gè)能夠根據(jù)真實(shí)視頻自動(dòng)進(jìn)行學(xué)習(xí)的模型來(lái)渲染諸如建筑物，數(shù)目和車(chē)輛等對(duì)象。

這項(xiàng)技術(shù)為游戲，汽車(chē)，架構(gòu)，機(jī)器人或虛擬現(xiàn)實(shí)快速創(chuàng)建一個(gè)虛擬世界提供了潛力。例如，你可以根據(jù)真實(shí)世界位置生成交互式場(chǎng)景，或者在消費(fèi)者面向渲染流行歌手的實(shí)況 演唱會(huì) 。

負(fù)責(zé)這一項(xiàng)目的英偉達(dá)Applied Deep Learning Research副總裁Bryan Catanzaro表示：“在25年來(lái)，英偉達(dá)一直在發(fā)明生成交互式圖形的新方法，而這是我們第一次通過(guò)神經(jīng)網(wǎng)絡(luò)實(shí)現(xiàn)這一目標(biāo)。神經(jīng)網(wǎng)絡(luò)，特別是生成模型，將改變圖形的創(chuàng)建方式。這可以幫助開(kāi)發(fā)者以更低的成本來(lái)創(chuàng)建新場(chǎng)景。”

研究結(jié)果是一款簡(jiǎn)單的駕駛游戲，其中用戶(hù)可以在城市場(chǎng)景中導(dǎo)航。所有內(nèi)容都以交互方式呈現(xiàn)，并使用了能夠?qū)⒂蓚鹘y(tǒng)圖形引擎生成的3D世界草圖轉(zhuǎn)換為視頻的神經(jīng)網(wǎng)絡(luò)。據(jù)悉，英偉達(dá)將在蒙特利爾舉行的NeurIPS 2018大會(huì)上演示實(shí)況demo。

這個(gè)神經(jīng)網(wǎng)絡(luò)能夠模擬世界的外觀，包括照明，材質(zhì)及其動(dòng)態(tài)。由于場(chǎng)景是完全合成生成，因此看來(lái)這可以輕松進(jìn)行編輯，自由刪除，修改或添加對(duì)象。

研究人員指出：“建模和重建視覺(jué)世界動(dòng)態(tài)的能力對(duì)于建立智能代理至關(guān)重要。除了純粹的科學(xué)興趣，學(xué)習(xí)如何合成連續(xù)視覺(jué)體驗(yàn)在計(jì)算機(jī)視覺(jué)，機(jī)器人和計(jì)算機(jī)圖形學(xué)中存在廣泛的應(yīng)用。”

文章來(lái)源：映維網(wǎng) 如轉(zhuǎn)載請(qǐng)標(biāo)明出處

原文鏈接 ： https://yivian.com/news/53630.html