12月7日,國家廣播電視總局發(fā)布了《沉浸式終端通用技術(shù)要求》《云游戲總體技術(shù)要求》《自由視角視頻系統(tǒng)技術(shù)要求》三項(xiàng)標(biāo)準(zhǔn)文件,已經(jīng)正式批準(zhǔn)為中華人民共和國廣播電視和網(wǎng)絡(luò)視聽推薦性行業(yè)標(biāo)準(zhǔn)。
1、《沉浸式終端通用技術(shù)要求》
該文件規(guī)定了沉浸式終端的顯示、還音、播控、呈現(xiàn)環(huán)境等通用技術(shù)要求。適用于沉浸屋、球幕、環(huán)幕、碗幕和小型沉浸式終端等沉浸式終端的系統(tǒng)設(shè)計(jì)、設(shè)備生產(chǎn)、系統(tǒng)搭建、項(xiàng)目建設(shè)、技術(shù)質(zhì)量評價、性能檢測等。不適用于常規(guī)影院,也不適用于VR頭盔、VR眼鏡等頭戴類終端,以及利用環(huán)境和非視聽裝置等構(gòu)造的沉浸式設(shè)施。
沉浸式終端,指采用非穿戴式設(shè)備觀看方式讓人獲得身臨其境感受的音視頻設(shè)備構(gòu)成的終端呈現(xiàn)系統(tǒng)。(由柱面、球面等曲面和多平面等多種類型顯示面構(gòu)成的顯示設(shè)備,以及還音設(shè)備及播控設(shè)備組成。如:球幕影院、環(huán)幕影院、沉浸屋、飛行影院、膠囊影院、飛行駕駛模擬艙等設(shè)施內(nèi)的音視頻系統(tǒng),以及具備類似功能的視聽裝置構(gòu)成的音視頻系統(tǒng)。)
小型沉浸式終端,指由顯示設(shè)備、內(nèi)容播放設(shè)備和還音設(shè)備構(gòu)成的主要面向家庭及個人的沉浸式音視頻系統(tǒng)。(通常指以投影或自發(fā)光顯示方式實(shí)現(xiàn)圖像顯示,相關(guān)技術(shù)指標(biāo)符合沉浸式基本要求,能獨(dú)立完成播放和呈現(xiàn)的成套終端系統(tǒng),包含40英寸以上的桌面顯示系統(tǒng),75英寸以上的電視和顯示面積在8m2以下的小型球幕或碗幕系統(tǒng)裝置等。)
投影式顯示設(shè)備,指采用光學(xué)方式投射畫面,通過呈現(xiàn)介質(zhì)反射形成人眼可見影像的設(shè)備。(含投影機(jī)、投影幕、成像膜或其他可反光的呈現(xiàn)介質(zhì)。)
按顯示方式劃分,沉浸式終端分類為:
a) 采用投影設(shè)備和反射式幕實(shí)現(xiàn)圖像顯示的投影式沉浸式終端;
b) 采用自發(fā)光設(shè)備實(shí)現(xiàn)圖像顯示的自發(fā)光式沉浸式終端。
按呈現(xiàn)形式劃分,沉浸式終端分類為:
a) 內(nèi)側(cè)顯示面為柱面形狀的環(huán)幕沉浸式終端;
b) 內(nèi)側(cè)顯示面為球面形狀的球幕沉浸式終端;
c) 內(nèi)側(cè)顯示面為多平面形狀的沉浸屋終端;
d) 內(nèi)側(cè)顯示面為其他形狀的異形沉浸式終端。
沉浸式終端采取獨(dú)立或多個顯示面組合的呈現(xiàn)方式,除小型沉浸式終端外,在最佳觀看位置,可觀看畫面覆蓋人眼視場角宜不小于135o(水平)×80o(垂直);70%的觀看區(qū)域可觀看畫面覆蓋人眼視場角應(yīng)不小于120o(水平)×70o(垂直),且具備完整的信號播放、傳輸、控制功能。
除小型沉浸式終端外,沉浸式終端顯示面中心與最近位置觀眾的視距應(yīng)不小于正前方顯示面寬度的0.3倍,應(yīng)不大于正前方顯示面寬度的1倍。
沉浸式終端不應(yīng)存在設(shè)備用電、安裝結(jié)構(gòu)、危害視覺聽覺、危害人身防護(hù)等安全隱患,使用期間不應(yīng)引起觀眾明顯的眩暈、惡心等不適。
沉浸式終端播放的視頻要求中,幀率應(yīng)至少支持48fps,宜支持更高的幀率。色域應(yīng)支持BT.709色域,宜支持DCI-P3色域或BT.2020色域。
2、《云游戲總體技術(shù)要求》
該文件規(guī)定了云游戲的總體技術(shù)架構(gòu),以及云游戲平臺、網(wǎng)絡(luò)、云游戲終端和云游戲安全的技術(shù)要求,并針對未成年人用戶對云游戲平臺和云游戲終端提出了要求。適用于云游戲系統(tǒng)與設(shè)備的規(guī)劃、設(shè)計(jì)、建設(shè)、驗(yàn)收、運(yùn)行、管理和維護(hù)。
云游戲總體技術(shù)架構(gòu)包括云游戲平臺、網(wǎng)絡(luò)、云游戲終端和云游戲安全四個部分,具體見圖1。
云游戲平臺接收用戶操作指令,完成游戲畫面的渲染、音視頻編解碼和游戲推流等操作,將游戲內(nèi)容以音視頻流的形式通過網(wǎng)絡(luò)傳輸?shù)接脩魝?cè)的終端進(jìn)行呈現(xiàn);用戶使用終端通過網(wǎng)絡(luò)發(fā)送操作指令到云游戲平臺進(jìn)行下一步游戲畫面的渲染、游戲推流等;云游戲安全貫穿云游戲的各個環(huán)節(jié),實(shí)現(xiàn)對用戶信息、賬號信息、游戲行為信息等的保護(hù)。
云游戲平臺的技術(shù)架構(gòu)由基礎(chǔ)能力層、資源管理層和交互管理層組成。其中,基礎(chǔ)能力層提供畫面渲染、音視頻編碼、虛擬化等能力,并為資源管理層提供服務(wù)接口,支持資源管理層配置和調(diào)度基礎(chǔ)資源。資源管理層提供云游戲所需的游戲?qū)嵗芾怼?shí)例調(diào)度、游戲時長控制、非用戶態(tài)熱更等能力,并為交互管理層提供服務(wù)接口。交互管理層提供用戶管理、客戶端接入鑒權(quán)、終端接入、游戲上下架與配置操作等能力,并支持接入各種類型終端的SDK,協(xié)助用戶接入云游戲服務(wù)。
3、《自由視角視頻系統(tǒng)技術(shù)要求》
該文件規(guī)定了自由視角視頻系統(tǒng)的技術(shù)要求,包括拍攝采集子系統(tǒng)、媒體處理子系統(tǒng)、分發(fā)子系統(tǒng)、分發(fā)網(wǎng)絡(luò)、終端播放子系統(tǒng)的技術(shù)要求,以及自由視角視頻數(shù)據(jù)格式要求。適用于自由視角視頻系統(tǒng)的設(shè)計(jì)、建設(shè)、驗(yàn)收、運(yùn)行和維護(hù),以及自由視角視頻內(nèi)容的拍攝、交換、分發(fā)、播放等。
自由視角視頻系統(tǒng),指采用多機(jī)位或環(huán)繞機(jī)位拍攝,獲得一定范圍內(nèi)環(huán)繞焦點(diǎn)多角度的視頻信息,經(jīng)過制作、傳輸、分發(fā)、播放等環(huán)節(jié),可為用戶提供特定范圍內(nèi)多視角連續(xù)切換,并形成空間位置自由移動視覺效果的一種視頻直播/點(diǎn)播系統(tǒng)。
自由視角視頻系統(tǒng)由拍攝采集子系統(tǒng)、媒體處理子系統(tǒng)、分發(fā)子系統(tǒng)、分發(fā)網(wǎng)絡(luò)、終端播放子系統(tǒng)五部分組成,系統(tǒng)典型架構(gòu)見圖1,應(yīng)用場景示例見附錄A,各部分組成及主要功能如下。
a) 拍攝采集子系統(tǒng)主要包括攝像機(jī)組、同步控制與信號傳輸連接、采集機(jī)位固定裝置、編碼器及相關(guān)軟件等部分,前端部署攝像機(jī)組獲取實(shí)時拍攝的音視頻流,并可根據(jù)需要選配編碼器,對攝像機(jī)組采集的音視頻流進(jìn)行編碼。
b) 媒體處理子系統(tǒng)實(shí)現(xiàn)自由視角視頻的制作,可通過本地或云端部署。本地部署通過媒體處理服務(wù)器、導(dǎo)播制作平臺等硬件部署,云端部署方式通過云計(jì)算平臺部署。
c) 分發(fā)子系統(tǒng)實(shí)現(xiàn)自由視角內(nèi)容的審核和分發(fā)。
d) 分發(fā)網(wǎng)絡(luò)可包括有線網(wǎng)絡(luò)、無線網(wǎng)絡(luò)等一種或多種,通過分發(fā)網(wǎng)絡(luò)實(shí)現(xiàn)自由視角視頻內(nèi)容傳輸分發(fā)。
e) 終端播放子系統(tǒng)實(shí)現(xiàn)自由視角視頻內(nèi)容在電視、電腦、平板、手機(jī)等終端設(shè)備上的播放和人機(jī)互動操作。
自由視角視頻系統(tǒng)端到端工作流程見圖2,具體如下:
a) 在拍攝采集子系統(tǒng)中,拍攝主體圍繞拍攝對象,按業(yè)務(wù)需求部署攝像機(jī)組進(jìn)行拍攝,同時對多臺攝像機(jī)進(jìn)行同步,以獲取拍攝現(xiàn)場音視頻流,并根據(jù)實(shí)際需要選配編碼器對音視頻流統(tǒng)一編碼;
b) 在媒體處理子系統(tǒng)中,音視頻流經(jīng)過前端媒體處理環(huán)節(jié)完成多路音視頻流同步及格式封裝轉(zhuǎn)換后進(jìn)入自由視角內(nèi)容制作環(huán)節(jié),制作生成自由視角直播內(nèi)容、自由視角點(diǎn)播內(nèi)容,并封裝為第7章規(guī)定的數(shù)據(jù)格式后傳輸至分發(fā)子系統(tǒng);
c) 在分發(fā)子系統(tǒng)中,完成對自由視角內(nèi)容的審核和分發(fā);
d) 通過分發(fā)網(wǎng)絡(luò)分發(fā)至電視、電腦、平板、手機(jī)等播放終端;
e) 通過終端播放子系統(tǒng)實(shí)現(xiàn)自由視角視頻的加載、解碼、渲染、播放和交互等。