智東西6月24日消息，近日，谷歌發(fā)布了一項(xiàng)新的球形“光場(chǎng)視頻”捕捉方案，以提升沉浸式媒體技術(shù)。它將傳統(tǒng)的攝影和視頻以更加身臨其境的3D方式呈現(xiàn)，可以使用戶隨時(shí)改變觀看視角，甚至可以觀察到畫面內(nèi)物體的細(xì)節(jié)。

這項(xiàng)新技術(shù)將會(huì)在今年8月舉行的SIGGRAPH上展出。從1974年開始，SIGGRAPH每年都會(huì)舉辦一次年會(huì)，絕大部分計(jì)算機(jī)圖技術(shù)軟硬件廠商每年都會(huì)將最新研究成果拿到SIGGRAPH年會(huì)上發(fā)布，大部分游戲的電腦動(dòng)畫創(chuàng)作者也將他們本年度最杰出的藝術(shù)作品集中在SIGGRAPH上展示。

一、46個(gè)攝像頭擰成一個(gè)球，多視角3D成像

據(jù)悉，谷歌的這項(xiàng)光場(chǎng)捕捉方案是一個(gè)球型結(jié)構(gòu)，這一92厘米直徑大的球由46個(gè)攝像頭組成。這個(gè)方案的原理類似于蒼蠅的復(fù)眼，每一個(gè)攝像頭可以從不同的角度捕捉周圍的場(chǎng)景，將多方向的視角合并為一個(gè)視角。

▲相機(jī)的視圖

相比于現(xiàn)有VR視頻中采用的普通3D立體效果，光場(chǎng)攝影具備更多視角，空間立體感更強(qiáng)。

在谷歌呈現(xiàn)出的視頻中，畫面可以隨著用戶的視角進(jìn)行轉(zhuǎn)變，用戶可以看到不同角度的圖像，這樣的圖像看起來(lái)更真實(shí)，并且具有動(dòng)態(tài)效果。

▲谷歌的光場(chǎng)捕捉方案捕捉和分割視圖的步驟

二、 瀏覽超180°場(chǎng)景，使用DeepView拼接算法

在細(xì)節(jié)方面，這項(xiàng)方案捕捉的光場(chǎng)視頻可實(shí)現(xiàn)10ppd（角分辨率）、220°以上的視場(chǎng)角、30fps刷新率。

盡管每一個(gè)攝像頭模組之間的平均距離為18厘米，但是其使用的DeepView拼接算法，可通過(guò)替代數(shù)據(jù)中包含的多層球形圖像，重建距離攝像頭20厘米處的物體。

▲攝像機(jī)放置在一個(gè)92厘米直徑大的球上

谷歌研究人員曾在SIGGRAPH 2018大會(huì)展示過(guò)類似的研究，當(dāng)時(shí)他們?cè)诔两絍R中引入了具有圖片真實(shí)感的光場(chǎng)靜止圖像。而今年推出的全新系統(tǒng)增加了視頻要素，為用戶提供了一個(gè)更為動(dòng)態(tài)的虛擬環(huán)境，使用戶可以瀏覽跨度超過(guò)180°的場(chǎng)景。

▲谷歌光場(chǎng)視頻捕捉畫面呈現(xiàn)

據(jù)悉，該方案可拍攝6DoF場(chǎng)景視頻，經(jīng)過(guò)壓縮后可在AR/VR頭顯或網(wǎng)頁(yè)端播放。此外，光場(chǎng)視頻的體積之小足以通過(guò)常規(guī)Wi-Fi傳輸，從而大大促進(jìn)了沉浸式AR和VR領(lǐng)域的進(jìn)步。

結(jié)語(yǔ)：谷歌沉浸式體驗(yàn)升級(jí)，虛擬體驗(yàn)更加真實(shí)

谷歌這項(xiàng)在光領(lǐng)域研究的新成果，為消費(fèi)者提供了一種真正的沉浸式體驗(yàn)。在疫情期間，大多數(shù)人不得已居家辦公，因此移動(dòng)設(shè)備中的圖片和視頻的利用率越來(lái)越高。

這一成果的研究人員希望沉浸式光場(chǎng)圖像和視頻能夠在未來(lái)的AR和VR平臺(tái)中，能夠像移動(dòng)設(shè)備的圖像視頻那樣在人們的生活中發(fā)揮重要作用。