BBC曾于2018年12月對(duì)智能旅游應(yīng)用展開(kāi)了5G測(cè)試，而現(xiàn)在他們已經(jīng)完成了第二次公開(kāi)測(cè)試，通過(guò)智能手機(jī)演示了低延遲高帶寬的視頻。
第二次測(cè)試使用了與第一次相同的“時(shí)間窗”概念，亦即數(shù)字重建與現(xiàn)實(shí)世界中的相同位置對(duì)齊疊加，但BBC不是將預(yù)渲染的360度視頻流式傳輸至用戶的智能手機(jī)，他們同時(shí)測(cè)試了“遠(yuǎn)程渲染”的VR版本：智能手機(jī)的物理位置發(fā)送到遠(yuǎn)程計(jì)算機(jī)，后者相應(yīng)地繪制歷史場(chǎng)景的實(shí)時(shí)VR視圖，然后將其流式傳輸回智能手機(jī)。
與預(yù)渲染的360度視頻相比，實(shí)時(shí)創(chuàng)建歷史視圖有幾個(gè)優(yōu)點(diǎn)。首先，360度視頻是根據(jù)單個(gè)物理位置繪制，所以用戶需要站在同一個(gè)位置，從而準(zhǔn)確地將歷史視圖與現(xiàn)實(shí)世界對(duì)齊，但VR版本可允許用戶完全自由移動(dòng)。其次，由于VR版本是實(shí)時(shí)繪制的，因此你可以像游戲一樣直接向其添加交互式或個(gè)性化元素。第三，用戶在VR版本中可以無(wú)損地“縮放”視點(diǎn)，仔細(xì)查看場(chǎng)景中的細(xì)節(jié)。
當(dāng)然，VR場(chǎng)景可以由智能手機(jī)直接繪制，但這存在多個(gè)缺點(diǎn)。例如，渲染質(zhì)量不及PC，需要安裝相當(dāng)臃腫的應(yīng)用程序，以及非常高的耗電量。
關(guān)鍵的技術(shù)要求是，智能手機(jī)的移動(dòng)和屏幕的視圖更新實(shí)現(xiàn)最低限度的延遲。對(duì)于巴斯羅馬浴場(chǎng)的歷史創(chuàng)建，布里斯托爾大學(xué)為BBC提供了60 GHz的5G網(wǎng)絡(luò)，由布里斯托爾大學(xué)的物理服務(wù)器集群執(zhí)行VR圖形繪制，并通過(guò)LTE實(shí)現(xiàn)5G網(wǎng)絡(luò)和智能手機(jī)之間的最終對(duì)接。
布里斯托大學(xué)利用OpenStack配置了10臺(tái)虛擬圖形繪制PC，并對(duì)其進(jìn)行了優(yōu)化，以便其能夠快速訪問(wèn)物理內(nèi)存和圖形硬件。每個(gè)虛擬機(jī)都安裝了BBC的圖形應(yīng)用程序和流媒體軟件。在測(cè)試期間，用戶的智能手機(jī)向布里斯托爾的服務(wù)器請(qǐng)求圖形繪制功能，然后分配相應(yīng)的IP端點(diǎn)以發(fā)送控制數(shù)據(jù)和接收繪制的視頻。
利用谷歌的ARCore SDK，每個(gè)智能手機(jī)都可以在巴斯羅馬浴場(chǎng)中定位，然后將其位置，方向和其他控制數(shù)據(jù)作為原始UDP數(shù)據(jù)包發(fā)送至布里斯托大學(xué)的圖形繪制PC。然后將利用歷史3D模型，以及基于NVIDIA Capture SDK的服務(wù)器應(yīng)用程序，圖形繪制應(yīng)用程序可以從智能手機(jī)的角度繪制歷史場(chǎng)景，生成H264視頻，并利用SRT流媒體協(xié)議將其傳輸至智能手機(jī)。接下來(lái)，智能手機(jī)通過(guò)Android MediaCodec實(shí)例對(duì)視頻進(jìn)行解碼。這個(gè)過(guò)程的結(jié)果可以參見(jiàn)下面這個(gè)視頻。我們可以看到，當(dāng)用戶移動(dòng)智能手機(jī)視圖時(shí)，大約15英里之外的圖形繪制PC正在創(chuàng)建相應(yīng)的視圖并實(shí)時(shí)發(fā)回。
對(duì)于這一測(cè)試，往返等待時(shí)間大約為200毫秒。測(cè)試參與者的反饋表明，這樣的移動(dòng)VR應(yīng)用令人感到滿意。但對(duì)VR頭顯而言不可接受，因?yàn)槔硐氲难舆t應(yīng)該小于大約50毫秒（注：50毫秒是BBC的設(shè)定，行業(yè)的設(shè)定是動(dòng)顯（MTP）延遲小于20毫秒）。BBC表示，如果要將這種技術(shù)用于頭顯體驗(yàn)，團(tuán)隊(duì)需要進(jìn)一步的優(yōu)化，可能性包括：
繪制比顯示器要求更寬的視場(chǎng)，并在更寬的視場(chǎng)中移動(dòng)用戶視點(diǎn)。用戶位置延遲將保持不變，但方向延遲將大大降低。使用子幀視頻編碼器，以便流媒體服務(wù)器不必等待繪制完整個(gè)圖像幀才把數(shù)據(jù)發(fā)回至智能手機(jī)。提高圖形應(yīng)用程序的幀速率（以及相應(yīng)的傳輸帶寬）通過(guò)僅使用UDP將視頻發(fā)送回智能手機(jī)，用網(wǎng)絡(luò)可靠性交換速度。
BBC通過(guò)參與者訪談獲得了大量的用戶反饋，并正在進(jìn)行分析以確定未來(lái)的計(jì)劃。對(duì)于用戶反饋，測(cè)試者特別渴望的一個(gè)功能是，能夠根據(jù)用戶的知識(shí)水平和興趣來(lái)“個(gè)性化”場(chǎng)景的歷史解讀。另一個(gè)受歡迎的要求是，將5G內(nèi)容與導(dǎo)游解說(shuō)相結(jié)合。
原文鏈接：https://yivian.com/news/59668.html
來(lái)源：映維網(wǎng)
