中國(guó)電信具有深度海量的粘性用戶(hù),IPTV機(jī)頂盒已經(jīng)是現(xiàn)成的終端資源,對(duì)于用戶(hù)而言,IPTV機(jī)頂盒不僅需要能與電視連接,同時(shí),也可以更多樣化的與VR頭顯對(duì)接,用戶(hù)不需要做過(guò)多的投入,即可以得到VR的體驗(yàn),IPTV無(wú)疑是一個(gè)優(yōu)質(zhì)的合作伙伴。從帶寬上來(lái)說(shuō),隨著寬帶中國(guó)戰(zhàn)略的進(jìn)一步落地,光纖入戶(hù)的帶寬進(jìn)一步提升,帶寬已經(jīng)讓用戶(hù)冗余,即便4K VBR平均碼率能夠達(dá)到15Mbps,但依然遠(yuǎn)遠(yuǎn)不能夠達(dá)到目前百兆入戶(hù)的上限,有一種業(yè)務(wù)需要對(duì)帶寬帶來(lái)挑戰(zhàn),需要突破百兆,能夠推動(dòng)流量業(yè)務(wù)的進(jìn)一步加深。于是,VR賦能IPTV,IPTV普及VR就成為一種可能。
VR巨幕影院將成為IPTV VR的切入點(diǎn),借助IPTV和機(jī)頂盒和寬視場(chǎng)高分辨率的HMD,可以渲染出IMAX巨幕影院的視聽(tīng)體驗(yàn)效果,用戶(hù)在家即可不受檔期影響,享受媲美親臨影院的體驗(yàn)。
以VR全景視頻作為IPTV VR的創(chuàng)新點(diǎn),在觀看全景視頻時(shí),用戶(hù)可以通過(guò)轉(zhuǎn)動(dòng)頭部觀看360度視角范圍內(nèi)的不同內(nèi)容,獲得全方位沉浸式的體驗(yàn)。通過(guò)VR全景直播,播出重大新聞事件、體育賽事、演唱會(huì)和發(fā)布會(huì)等大型賽事活動(dòng),結(jié)合VR全景直播實(shí)現(xiàn)可感知事件現(xiàn)場(chǎng)。
同時(shí),VR社交將開(kāi)啟社交網(wǎng)絡(luò)2.0時(shí)代,讓相隔千里的朋友,如同在場(chǎng),并用無(wú)窮創(chuàng)造力變換相聚的地點(diǎn)。VR游戲,虛擬現(xiàn)實(shí)與視頻游戲的結(jié)合,為用戶(hù)帶來(lái)更為真實(shí)而強(qiáng)烈的感官刺激,游戲有望成為最先發(fā)展起來(lái)的VR大眾市場(chǎng)。
制定機(jī)頂盒VR芯片,獲取影院級(jí)體驗(yàn):
IPTV的VR如果要解決,就需要解決帶寬、解碼、渲染的痛點(diǎn),于是IPTV采用了全景魔方的解決方案,通過(guò)2K的全景底圖+8K局部解碼(分成小塊)的方式,讓整個(gè)VR視頻能夠傳得動(dòng),解得動(dòng)。同時(shí),為了最小化GPU計(jì)算和內(nèi)存帶寬的需求,讓200塊的機(jī)頂盒GPU能夠拖得動(dòng)整個(gè)VR解碼渲染的需求,進(jìn)一步解決nVIDIA卡的成本問(wèn)題,通過(guò)現(xiàn)有的硬解芯片解決這一問(wèn)題,建設(shè)了基于專(zhuān)用電路的解碼、渲染以及顯示,能夠把VR的體驗(yàn)通過(guò)IPTV機(jī)頂盒低成本實(shí)現(xiàn)。
那么VR巨幕影院和VR全景視頻業(yè)務(wù)是否能夠?qū)崿F(xiàn)?其中也遭遇了一部分的痛點(diǎn),例如,沒(méi)有FOV大于120度的頭顯,單眼2K分辨率指標(biāo)必須到2018年才能面市。芯片目前全4K芯片智能支撐到2.5K頭顯輸出,內(nèi)容在8K VR直播尚存技術(shù)難點(diǎn),8K VR離線(xiàn)成本高。
于是中國(guó)電信上海研究院從機(jī)頂盒芯片到網(wǎng)絡(luò)到平臺(tái)到最終效果,提出了整體解決方案,VR巨幕影院的解決方案主要是以下:在機(jī)頂盒芯片上,制定了機(jī)頂盒VR芯片巨幕影院視頻處理能力要求,制定機(jī)頂盒VR外接頭顯設(shè)備的接口與協(xié)議,HMD成為體驗(yàn)的核心,發(fā)布支持頭顯設(shè)備的白名單,在網(wǎng)絡(luò)側(cè),用現(xiàn)有支持4K/全4K能力的網(wǎng)絡(luò)能力,通過(guò)現(xiàn)有的IPTV平臺(tái)、內(nèi)容以及CDN系統(tǒng),目標(biāo)將支持HMD顯示獲取影院級(jí)的體驗(yàn)。
VR全景視頻:制定機(jī)頂盒VR芯片高分辨率全景視頻處理能力要求,推動(dòng)6家主流機(jī)頂盒芯片廠家實(shí)現(xiàn)VR巨幕影院和高分辨率VR全景視頻功能。8K VR視頻在電視端和HMD端實(shí)現(xiàn)輸出顯示。在網(wǎng)絡(luò)上全傳的模式碼率需求可以達(dá)到80M-160Mbps,超越百兆寬帶的介入能力,部分傳的模式可以實(shí)現(xiàn)帶寬和時(shí)延的折中。通過(guò)現(xiàn)有的IPTV平臺(tái)以及CDN系統(tǒng),新增全國(guó)視頻預(yù)處理平臺(tái),支持4K、8K、12K全景視頻內(nèi)容。目標(biāo)是實(shí)現(xiàn)8K高分辨率全景視頻點(diǎn)播、直播,獲取沉浸式的親身體驗(yàn)和現(xiàn)實(shí)生活。
羅傳飛博士同時(shí)提了對(duì)未來(lái)的要求與展望,首先是頭顯,VR近眼顯示體驗(yàn)突破是產(chǎn)業(yè)成功的基礎(chǔ),現(xiàn)階段基于光學(xué)和屏幕顯示的HMD體驗(yàn)的提升決定了VR產(chǎn)業(yè)成功的基礎(chǔ),F(xiàn)OV大小影響到巨幕的體驗(yàn),通過(guò)望遠(yuǎn)鏡看世界。其中頭顯所需要決定的核心指標(biāo):FOV 120+,Res 2K/eye,MTF 20ms,Refresh 75Hz以及價(jià)格。
其次是芯片VR處理能力的提升,需要產(chǎn)業(yè)鏈更多的魄力。體驗(yàn)良好的HMD需要性?xún)r(jià)比更高的主機(jī),芯片需要針對(duì)VR處理能力進(jìn)行提升,在VR工作上,傳統(tǒng)機(jī)頂盒芯片廠商動(dòng)力、儲(chǔ)備依然不足,核心要求,是專(zhuān)用電路DPU、4K/8K Frame Buffer、GPU能力提升并且定位跟蹤。
VR的發(fā)展首要滿(mǎn)足沉浸體驗(yàn)的要求,預(yù)計(jì)對(duì)網(wǎng)絡(luò)帶寬的需求達(dá)到100—500Mbps,VR發(fā)展在沉浸體驗(yàn)達(dá)到一定程度時(shí)必然會(huì)對(duì)交互體驗(yàn)提出更高的要求,預(yù)計(jì)對(duì)網(wǎng)絡(luò)時(shí)延的需求達(dá)到10ms-15ms。同時(shí)對(duì)沉浸體驗(yàn)向交互式體驗(yàn)以及融合體驗(yàn)提出了技術(shù)演進(jìn)路線(xiàn)圖。