為提升AR對象分類,Facebook開源Detectron計算機視覺算法VR/AR

    砍柴網 / 青亭網 / 2018-01-30 20:41
    目前尚不清楚具體是哪支團隊正在把Detectron用于增強現實,不過很可能就是Oculus。早在F8大會期間,Oculus的首席科學家Michael Abrash就曾探討過,增強現實將如何并于何時...

    Facebook本周宣布開放Detectron,即該公司基于深度學習框架的計算機視覺對象檢測算法平臺。該公司表示,開放項目的動機在于加速計算機視覺研究,Facebook團隊正在使用該平臺開發各種應用,包括增強現實技術。

    facebook-detectron-1021x580

    在我最近的一篇文章中,詳細介紹了增強現實如今面臨的三大挑戰,其中的實時對象分類是最大的障礙之一:

    要讓計算機視覺理解“杯子”的含義,而不是僅僅看到一個形狀,這是一個不容小覷的問題。所以這么多年來,我們在AR演示作品中總會看到人們把基準標記附加到對象身上,以實現更細致的追蹤和交互。為什么會如此困難呢?第一個挑戰在于分類。杯子有數千種形狀、大小、顏色和紋理。有些杯子擁有特殊的屬性和特殊的用途(如燒杯),也就是說不同的杯子的使用場合和背景也有所不同。想象一下,編寫這么一個可以幫助計算機理解上述所有概念的算法是多大的挑戰。你也可以想象,編寫一個向計算機解釋杯子和碗之間區別的代碼是多么地困難。

    該文章還指出,“深度學習”有可能是實時對象分類的其中一種解決方案——這種學習涉及“訓練”計算機去解讀它所看到的事物,而不是人工去編寫檢測程序。本周,Facebook已經正式開源了他們的對象檢測算法,這可能會加速能進行實時對象分類的系統的開發,從而讓增強現實發揮真正的功效。

    如果沒有對特定環境進行預編程,與我們周圍世界進行交互的增強現實將需要對我們附近的情況有粗略了解。比方說,如果你正戴著一款AR眼鏡,你希望把烤箱的溫度投影到烤箱上方,同時在冰箱上方投影出已經快要吃完的食物,這時AR眼鏡將需要了解烤箱和冰箱的形狀。由于烤箱和冰箱涵蓋的形狀、樣式以及擺放位置都不盡相同,這將成為一項極具挑戰性的任務。

    oven-refrigerator-object-detection-549x420

    在深度學習算法的鏡頭下,對象分類是什么樣子的

    Facebook的人工智能研究團隊與其他相關團隊一直在研究,如何利用深度學習來幫助計算機解決對象檢測的問題,而這一基于Caffe2深度學習框架的對象檢測算法就叫作Detectron。在正式托管至GitHub后,現在任何人都可以自行嘗試。Facebook希望,Detectron開源后能幫助世界各地的計算機視覺研究人員進行新的嘗試,并不斷改進最新的技術。

    該項目的GitHub頁面上寫道:“Detectron旨在為對象檢測研究提供高質量、高性能的代碼庫。Detectron的設計十分靈活,能夠支持新研究的快速實施與評估。”

    human-object-interactions-paper-640x341

    算法可以檢測視頻輸入,并能夠猜測出構成場景的離散對象。“檢測和識別人類與物體的交互作用 (Gkioxari et al)”等研究項目已經在使用Detectron了,并以其為基礎來了解人類在特定環境中利用物體作出的行為。這是向正確的方向邁出的一步,以幫助計算機理解我們正在做的事情,從而能夠為忙碌的我們提供有價值的信息。

    除了人工智能研究之外,Detectron還被用于Facebook的其他內部團隊;Facebook在Detectron的開源聲明中寫道:“各支團隊正在利用這個平臺來為各種應用進行定制模型訓練,其中也包括增強現實和社區完整性研究。”

    目前尚不清楚具體是哪支團隊正在把Detectron用于增強現實,不過很可能就是Oculus。早在F8大會期間,Oculus的首席科學家Michael Abrash就曾探討過,增強現實將如何并于何時徹底改變我們的生活。

    來源:青亭網



    1.砍柴網遵循行業規范,任何轉載的稿件都會明確標注作者和來源;2.砍柴網的原創文章,請轉載時務必注明文章作者和"來源:砍柴網",不尊重原創的行為砍柴網或將追究責任;3.作者投稿可能會經砍柴網編輯修改或補充。


    閱讀延展



    最新快報

    1
    3
    主站蜘蛛池模板: 精品国产一区二区麻豆| 国产午夜精品一区二区三区极品 | 一区二区三区波多野结衣 | 在线电影一区二区| 久久久久人妻一区精品| 国产福利在线观看一区二区| 国产成人无码AV一区二区在线观看 | 亚洲国产一区二区三区| 国产成人一区二区三区高清 | 无码人妻一区二区三区免费视频| 无码人妻精品一区二区三区99性| 亚洲乱色熟女一区二区三区丝袜| 精品理论片一区二区三区| 国产一区二区三区精品久久呦| 亚洲国产成人久久一区二区三区| 亚洲av无码一区二区三区天堂古代| 亚洲av综合av一区| 精品亚洲一区二区| 国产亚洲一区二区三区在线| 制服中文字幕一区二区| 综合久久久久久中文字幕亚洲国产国产综合一区首 | 国精产品一区一区三区免费视频 | 中文字幕一区二区三区视频在线| 影院无码人妻精品一区二区| 无码人妻精品一区二| 国产观看精品一区二区三区| 制服中文字幕一区二区 | 亚洲国产高清在线一区二区三区| 无码一区二区三区亚洲人妻| 国产日韩精品一区二区在线观看播放 | 伊人久久一区二区三区无码 | 午夜精品一区二区三区免费视频| 日本不卡一区二区三区视频| 国产精品高清一区二区三区| 一区二区三区在线|欧| 精品福利视频一区二区三区| 成人免费视频一区二区三区 | 亚洲日韩精品一区二区三区| 久久精品视频一区| 亚洲日韩AV一区二区三区四区| 国内精品视频一区二区三区|