【CCBN】戴霖：世界匠心——VR應(yīng)用創(chuàng)造鏡頭震撼力
2017-03-22 20:21:43 來源：DVBCN 熱度:
3月22日，CCBN主題報(bào)告會在北京國際會議中心召開。會上，新奧特（北京）視頻技術(shù)有限公司副總裁VR/AR研究院常務(wù)副院長戴霖作了題為《世界匠心：VR應(yīng)用創(chuàng)造鏡頭震撼力》的精彩演講。
圖為新奧特（北京）視頻技術(shù)有限公司副總裁VR/AR研究院常務(wù)副院長戴霖
2016年被稱為VR元年，新奧特成立了VR研究院，專門負(fù)責(zé)VR/AR的研究。說到VR大家腦海里閃現(xiàn)的就是全景視頻，戴著眼鏡來進(jìn)行觀看的視頻，但是實(shí)際上對于虛擬現(xiàn)實(shí)來說，那樣一個(gè)全景視頻并不是它的依存度，還有另外一個(gè)方式就是環(huán)物拍攝，通過攝像機(jī)進(jìn)行360度的拍攝，來展現(xiàn)這個(gè)物體的各個(gè)角度，這個(gè)稱為環(huán)物的拍攝，戴霖今天介紹的主要內(nèi)容就是環(huán)物拍攝的方式。
實(shí)際上這個(gè)方式在很多VR中心也在使用這樣的方式，通過環(huán)物拍攝來進(jìn)行被拍攝物的三維模型化。把它由視物來進(jìn)行模型化之后，來顯示在三維的虛擬空間中。所以這個(gè)世界上環(huán)物拍攝技術(shù)也是虛擬現(xiàn)實(shí)的應(yīng)用之一。環(huán)物這種拍攝的方式目前應(yīng)該說大家更，最廣泛地使用的就是子彈時(shí)間的拍攝方式。
目前這樣一個(gè)拍攝方式大量采用的都是這樣用單反或者用手機(jī)來架設(shè)陣列的這樣一個(gè)方式。這樣的一個(gè)方式有它固有的問題，比如說這種方式大量采用的是擺拍或者是抓拍的方式，擺拍很好理解，就是我們這邊說開始，被攝的人開始做動作。在另外的一些應(yīng)用里頭可能會需要有一個(gè)人專門來觀看賽場或者鏡頭，來預(yù)測之后的十幾秒或者幾秒會不會精彩鏡頭的出現(xiàn)，如果會有就開始錄制，如果一個(gè)不留神或者什么可能就會錯(cuò)過一些精彩鏡頭，因?yàn)樗荒軌蛉虒?shí)時(shí)地進(jìn)行錄制。它的所有存儲是分散在各個(gè)相機(jī)的內(nèi)部，它需要有一個(gè)拍攝完成之后再去下載制作的這樣一個(gè)過程。還有一個(gè)就是單反的固定，這些相機(jī)的固定問題，因?yàn)樗麄儾皇菫榱碎L時(shí)間連續(xù)拍攝所設(shè)計(jì)的，包括它的感光元件發(fā)熱問題等等都會造成拍攝質(zhì)量的下降，因?yàn)樗幌駭z像機(jī)一樣可以長時(shí)間拍攝而設(shè)計(jì)。新奧特現(xiàn)有子彈拍攝速度實(shí)際上從這些問題來看，它實(shí)際上不是很適合于電視直播的實(shí)時(shí)制作這樣一個(gè)場景。新奧特這邊是結(jié)合我們的一些優(yōu)勢技術(shù)，把幾個(gè)產(chǎn)品的核心技術(shù)進(jìn)行了一個(gè)組合，打造了這樣一個(gè)適合電視直播的360度環(huán)繞拍攝技術(shù)。
在這個(gè)系統(tǒng)里頭首先作為這個(gè)系統(tǒng)的基礎(chǔ)，就是慢動作系統(tǒng)，不管是旋轉(zhuǎn)也好，等等也好，都要有慢動作的展現(xiàn)，慢動作系統(tǒng)是一個(gè)基礎(chǔ)。為了解決拍攝和制作分離的過程，新奧特希望能夠把所有的拍攝跟制作過程進(jìn)行分離，避免單反等等離散存儲的缺點(diǎn)，戴霖和技術(shù)團(tuán)隊(duì)采用這樣一個(gè)多通道收錄系統(tǒng)，利用強(qiáng)大的多通道收錄系統(tǒng)可以同時(shí)把所有攝像機(jī)畫面同時(shí)連續(xù)收錄，不間斷收錄，隨時(shí)可以進(jìn)行回看，隨時(shí)可以進(jìn)行制作。還有一個(gè)就是不可缺少的子彈時(shí)間的拍攝系統(tǒng)。這幾個(gè)系統(tǒng)的結(jié)合，就形成了VSE Motion360度全景的慢動作回放系統(tǒng)。
這樣一個(gè)系統(tǒng)首先是慢動作+360度慢動作環(huán)繞拍攝系統(tǒng)，這兩個(gè)系統(tǒng)很好的結(jié)合。傳統(tǒng)的慢動作系統(tǒng)實(shí)際上就是把鏡頭慢動作，然后在時(shí)間軸上進(jìn)行一個(gè)調(diào)節(jié)，可以進(jìn)行任意倍速的慢放。通過這樣的一個(gè)形成相機(jī)陣列之后，所有的相機(jī)陣列的信號進(jìn)入慢動作系統(tǒng)以后，相機(jī)陣列，相機(jī)和相機(jī)之間的圖像就產(chǎn)生了相關(guān)性，意味著除了在時(shí)間軸上進(jìn)行平移之外，就增加了一個(gè)空間軸這樣一個(gè)緯度，通過時(shí)間軸和空間軸的組合，就可以形成各種效果。最終輸出還是采用廣電的SDI的輸出。
在操作上面很容易想象，原來一維的變成二維的曲線，這個(gè)曲線實(shí)際上在下面階段一還是在一個(gè)單一的時(shí)間軸平移。到了階段二開始在多個(gè)相機(jī)之間進(jìn)行平移。到了階段三再回到單鏡頭的平移。這樣的話，通過這樣的一個(gè)方式，我們就可以形成之前短片上所看到的那些效果，包括可以進(jìn)行更多的，包括回放等等，隨著大家的需要可以設(shè)計(jì)不同的曲線，通過這樣的曲線來達(dá)到不同的特色。
和之前說的那些子彈時(shí)間的拍攝系統(tǒng)不同，新奧特研究室采用的是專業(yè)的視頻攝制設(shè)備，采用的是廣電級的超小型的攝像機(jī)，并且視頻輸出也是持續(xù)不間斷的，跟單反有相當(dāng)大的區(qū)別。戴霖表示他們的系統(tǒng)同時(shí)采用了外同步，通過外同步這樣的形式進(jìn)行所有攝像機(jī)之間的拍攝的同步，使得所有的信號在同一時(shí)間可以拍攝同一幀，避免幀之間的錯(cuò)位，因?yàn)橹白鲞^的測試，幀的同步是非常關(guān)鍵的，大概應(yīng)該是幾個(gè)毫秒，大概應(yīng)該是不到十毫秒，甚至幾毫秒的差都會使得圖像產(chǎn)生不出效果。同時(shí)我們采用的攝像機(jī)也支持4K拍攝，可以形成更高的視頻質(zhì)量。
作為這個(gè)系統(tǒng)基礎(chǔ)的慢動作系統(tǒng)，戴霖指出這個(gè)技術(shù)當(dāng)時(shí)是為了體育賽事量身定做的，大家知道新奧特在體育賽事轉(zhuǎn)播有非常豐富的經(jīng)驗(yàn)?；隗w育轉(zhuǎn)播的需要，慢動作系統(tǒng)是基于這樣的需要來進(jìn)行大作。這個(gè)系統(tǒng)提供這種可視化多通道的操控，包括故事板的方式進(jìn)行播出，同時(shí)我們?nèi)讨С?K、50P，包括網(wǎng)絡(luò)集群化，可以通過集群化的方式進(jìn)行擴(kuò)展。
慢動作的速度可以在0-100%之間進(jìn)行條節(jié)，快一點(diǎn)也是沒有問題的。精度可以隨時(shí)進(jìn)行入點(diǎn)打點(diǎn)，即時(shí)進(jìn)行慢動作回放，完全與收錄過程無關(guān)，不會干擾。同時(shí)這是集群的方式，除了服務(wù)器之間的集群，還有操作面板之間的集群，其實(shí)慢動作是一個(gè)強(qiáng)操作的系統(tǒng)，它對操作性的要求是很高的，通過面板的集群，實(shí)際上是可以的，一個(gè)人來進(jìn)行大量的操作，一個(gè)人來專門進(jìn)行點(diǎn)位的修正，通過這樣的方式來結(jié)合工作。同時(shí)在安全方面，系統(tǒng)第一個(gè)是數(shù)據(jù)循環(huán)記錄，當(dāng)然是存儲容量的問題了，還有素材的意外保護(hù)工作，系統(tǒng)斷電之間引入的素材都可以確保正常使用。
慢動作系統(tǒng)，首先支持六訊道高清信號錄制及兩訊道高清信號慢放。戴霖表示，六訊道并不是代表系統(tǒng)的收錄能力做到多好，而是說在界面上實(shí)時(shí)能夠展示的是六訊道，當(dāng)然可以錄更多的，剛才也說過，其實(shí)他們系統(tǒng)能夠做到27個(gè)高清信號同時(shí)進(jìn)行收錄。在4K方面也可以支持四訊道4K 50P信號錄制和兩訊道回放。4K 50P折算到高清的話，實(shí)際上是相當(dāng)于8個(gè)高清的計(jì)算能力的需要，能支持到4K 50P的四信道。包括超過1000條素材的打點(diǎn)存放，支持建立超過100個(gè)播放列表，支持多達(dá)256個(gè)Mark點(diǎn)，包括專業(yè)操作面板，剛才說了這是強(qiáng)操作的系統(tǒng)。
慢動作360度全角度環(huán)繞拍攝系統(tǒng)最適用的是體育節(jié)目，就是動作幅度比較大的，動作幅度越大越能展現(xiàn)它的沖擊力，所以體育是當(dāng)仁不讓的這個(gè)系統(tǒng)最適合的一個(gè)應(yīng)用。綜藝也可以，因?yàn)榫C藝實(shí)際上包括一些舞蹈等等的動作，實(shí)際上也是非常適合于這樣的系統(tǒng)應(yīng)用。還有就是一些其它的應(yīng)用，這里畫了一個(gè)問號，實(shí)際上是希望大家開拓一下想象力，去挖掘這個(gè)系統(tǒng)在更多的行業(yè)或者場景應(yīng)用。
戴霖總結(jié)道：“未來的技術(shù)發(fā)展規(guī)劃，這里頭簡單說一下，兩條，第一條是引入HFR高幀率的拍攝，我們計(jì)劃將幀率提升到100P，這樣的話，可以打幅度減少運(yùn)動模糊，能夠讓拍攝的質(zhì)量提得更高。因?yàn)槲覄偛乓舱f了，實(shí)際上這個(gè)系統(tǒng)最適合應(yīng)用于大動作的場景，所以100P對這樣的場景是非常有幫助的。第二個(gè)是采用基于定云的多視角三維重建技術(shù)，其實(shí)這個(gè)跟剛才我們所說的幀間差值是非常相關(guān)的，如果想達(dá)成非常高的幀間差值的話，就需要知道被收錄的每一點(diǎn)的景深，如果有了這個(gè)景深的信息，就能夠很好地進(jìn)行幀的間的差值，實(shí)際上這樣的云技術(shù)，實(shí)際上是通過多角度的拍攝來進(jìn)行被攝物的三維重建?；仡櫼幌逻@樣的一個(gè)系統(tǒng)適合電視直播360度的全角度慢動作回放系統(tǒng)，它實(shí)際上是一個(gè)慢動作+多角度收錄，加上子彈拍攝的系統(tǒng)，最終形成了我們的VSE Motion。我最開頭也說過，現(xiàn)在VR實(shí)際上是很多也在采用這樣的技術(shù)來進(jìn)行實(shí)物的虛擬化，是這樣的方式。這也是未來我們的兩條技術(shù)路線，往這個(gè)方向去走。”
責(zé)任編輯：黃焱林
