如果有關注與VR相關的技術文章，你可能曾多次見過“二次投影（reprojection）”這個術語，如交錯二次投影或異步二次投影。二次投影是為了解決VR游戲的苛刻性能要求，旨在填補無法及時渲染的幀。比方說一款游戲不能達到標準的90fps，這時交錯二次投影將“強迫”其降至45fps，并在這基礎下每隔一幀進行一次重新投影，從而實現90fps的幀率。作為交錯二次投影的升級版，異步二次投影則是智能地插入一幀，從而有效減少畫面抖動并使得體驗更為流暢自然。
現根據微軟的一份最新專利，這家科技巨頭似乎有意為全息視頻采用類似的二次投影技術，以改善流式傳輸的帶寬/質量。
發明文件顯示，諸如HoloLens這樣的MR頭顯在視頻壓縮和傳輸實況視頻方面存在一定的挑戰，如帶寬。另外，一系列現有的視頻壓縮技術都依賴于這樣一個概念：連續視頻幀的大部分背景從一個視頻幀到下一個視頻幀時保持相對靜態，因此只有實際變化的像素需要傳輸。但對于頭戴式顯示器，頭部移動可導致圖像數據（包括背景）中更頻繁和更大幅度的變化，這降低了已知視頻壓縮技術的有效性。
因此，MR頭顯需要一種可以減少帶寬要求和/或提升分辨率的技術，亦即微軟在名為“Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality（二次投影全息視頻以改善流式傳輸帶寬/質量）”的發明文件中所描述的技術。
具體來說，微軟描述的技術適用于具有攝像頭和深度傳感器的全息設備。在將數據傳遞到計算P幀（或B幀）的視頻壓縮器之前，流式傳輸應用程序執行應用于先前幀的圖像扭曲3D變換。系統將利用camera的已知3D位置和camera前面的3D幾何形狀，并基于camera的當前位置重新投影前一幀，而不是花費時間和資源來完全重新渲染一幀，從而減少發送流式視頻的數據帶寬。
相關專利：Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality
盡管這只是一份專利，但考慮到“Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality（二次投影全息視頻以改善流式傳輸帶寬/質量）”是于2017年1月提交，所以如果馬上就要在MWC大會亮相的HoloLens 2搭載了這項技術，我們將不會感到驚訝。
原文鏈接：https://yivian.com/news/57048.html
來源：映維網
