智東西6月24日消息，近日，谷歌發(fā)布了一項(xiàng)新的球形“光場視頻”捕捉方案，以提升沉浸式媒體技術(shù)。它將傳統(tǒng)的攝影和視頻以更加身臨其境的3D方式呈現(xiàn)，可以使用戶隨時(shí)改變觀看視角，甚至可以觀察到畫面內(nèi)物體的細(xì)節(jié)。

這項(xiàng)新技術(shù)將會在今年8月舉行的SIGGRAPH上展出。從1974年開始，SIGGRAPH每年都會舉辦一次年會，絕大部分計(jì)算機(jī)圖技術(shù)軟硬件廠商每年都會將最新研究成果拿到SIGGRAPH年會上發(fā)布，大部分游戲的電腦動畫創(chuàng)作者也將他們本年度最杰出的藝術(shù)作品集中在SIGGRAPH上展示。

一、46個(gè)攝像頭擰成一個(gè)球，多視角3D成像

據(jù)悉，谷歌的這項(xiàng)光場捕捉方案是一個(gè)球型結(jié)構(gòu)，這一92厘米直徑大的球由46個(gè)攝像頭組成。這個(gè)方案的原理類似于蒼蠅的復(fù)眼，每一個(gè)攝像頭可以從不同的角度捕捉周圍的場景，將多方向的視角合并為一個(gè)視角。

▲相機(jī)的視圖

相比于現(xiàn)有VR視頻中采用的普通3D立體效果，光場攝影具備更多視角，空間立體感更強(qiáng)。

在谷歌呈現(xiàn)出的視頻中，畫面可以隨著用戶的視角進(jìn)行轉(zhuǎn)變，用戶可以看到不同角度的圖像，這樣的圖像看起來更真實(shí)，并且具有動態(tài)效果。

▲谷歌的光場捕捉方案捕捉和分割視圖的步驟

二、 瀏覽超180°場景，使用DeepView拼接算法

在細(xì)節(jié)方面，這項(xiàng)方案捕捉的光場視頻可實(shí)現(xiàn)10ppd（角分辨率）、220°以上的視場角、30fps刷新率。

盡管每一個(gè)攝像頭模組之間的平均距離為18厘米，但是其使用的DeepView拼接算法，可通過替代數(shù)據(jù)中包含的多層球形圖像，重建距離攝像頭20厘米處的物體。

▲攝像機(jī)放置在一個(gè)92厘米直徑大的球上

谷歌研究人員曾在SIGGRAPH 2018大會展示過類似的研究，當(dāng)時(shí)他們在沉浸式VR中引入了具有圖片真實(shí)感的光場靜止圖像。而今年推出的全新系統(tǒng)增加了視頻要素，為用戶提供了一個(gè)更為動態(tài)的虛擬環(huán)境，使用戶可以瀏覽跨度超過180°的場景。

▲谷歌光場視頻捕捉畫面呈現(xiàn)

據(jù)悉，該方案可拍攝6DoF場景視頻，經(jīng)過壓縮后可在AR/VR頭顯或網(wǎng)頁端播放。此外，光場視頻的體積之小足以通過常規(guī)Wi-Fi傳輸，從而大大促進(jìn)了沉浸式AR和VR領(lǐng)域的進(jìn)步。

結(jié)語：谷歌沉浸式體驗(yàn)升級，虛擬體驗(yàn)更加真實(shí)

谷歌這項(xiàng)在光領(lǐng)域研究的新成果，為消費(fèi)者提供了一種真正的沉浸式體驗(yàn)。在疫情期間，大多數(shù)人不得已居家辦公，因此移動設(shè)備中的圖片和視頻的利用率越來越高。

這一成果的研究人員希望沉浸式光場圖像和視頻能夠在未來的AR和VR平臺中，能夠像移動設(shè)備的圖像視頻那樣在人們的生活中發(fā)揮重要作用。