根據對象的二維圖像創建三維表示是一項困難的任務。例如，創建三維表示需要根據二維圖像所描繪的二維特征來推斷三維特征。 然而， 一般難以確定兩個圖像是否從不同視角描繪了對象的相同特征。
有的解決方案利用極線將2D圖像中的點相關聯。一個圖像中的特征點可用于將一條極線投影到另一個圖像上。另一圖像中與極線相交的特征點可以與用于投影線的特征點相關聯。但對于復雜場景或涉及多個對象的場景中，極線可能無法有效識別相關特征。
所以，微軟認為基于極線的方法存在提升空間。日前，美國專利商標局公布公布了一份名為“3d Skeletonization Using Truncated Epipolar Lines（利用截平極線的3D骨架化）”的專利。
這份發明文件主要描述了利用從不同視點捕獲的目標對象二維圖像來生成三維骨架的技術。微軟指出：“可以從不同的攝像頭角度捕獲對象的圖像。可以在捕獲的圖像中識別對象的特征關鍵點。”
相關專利：Microsoft Patent | 3d Skeletonization Using Truncated Epipolar Lines
微軟進一步解釋說，可以接收和分析從不同視點描繪目標對象的圖像，從而檢測目標對象的可識別特征。然后，可以利用截平的極線來關聯各個圖像中的關鍵點。
對于一些傳統的系統，在涉及多個對象的場景中，給定的極線可以與圖像中的多個關鍵點相交。如果僅使用極線，難以確定多個相交關鍵點中的哪一個應與用于生成極線的關鍵點相關聯。
所以，微軟提出利用截平的極線來關聯關鍵點。這家科技巨頭表示，截平的極線可以將用于交叉關鍵點檢查的圖像區域限制為更可能包含目標對象特征，同時不包含場景中其他對象的區域，從而有利于關聯所涉及的關鍵點。
具體來說，關鍵點的深度信息可用于截平利用關鍵點創建的極線。相關特征關鍵點可用于為對象的相關特征創建三維特征坐標。可以使用三維特征坐標生成三維骨架。可以將一個或多個三維模型映射到三維骨架并進行渲染。渲染的一個或多個三維模型可以顯示在一個或多個顯示設備上。
專利文件繼續寫道，所述的一個或多個三維模型可以“輸出到全息顯示設備或其他類型的顯示設備。例如，渲染器可以生成左圖像和右圖像，并在虛擬現實或增強現實頭顯中顯示目標對象的3D表示。”另外，可用作輸出設備的全息顯示設備示例包括“HoloLens”和“HTC Vive”。
名為“3d Skeletonization Using Truncated Epipolar Lines（利用截平極線的3D骨架化）”的專利最初于2017年11月提交，并在日前由美國專利商標局正式公布。需要注意的是，目前尚不確定微軟是否會或將于何時商業化具體的發明技術。
原文鏈接：https://yivian.com/news/61228.html
來源：映維網
