據英國《每日郵報》6月14日報道,國際足聯世界杯將于14日開賽,目前研究人員已創建出一種可以將足球比賽視頻轉化為3D全息圖的AI,該技術可以將YouTube視頻投射到桌面,將其重構為3D圖像。研究人員說,佩戴任何3D或AR設備便可觀看。

來自華盛頓大學、臉書和谷歌的研究人員創建了第一個端到端的深度學習系統,將YouTube上的足球比賽視頻轉化為動態的3D全息圖。他們從國際足聯比賽視頻中提取了12000張球員的2D圖像,然后利用3D數據進行卷積神經網絡訓練。研究人員說,重塑足球比賽視頻并不容易,面臨著許多挑戰。他們在描述這項工作的一項新研究中寫道:“我們必須估計攝像機相對于比賽場地的位置與角度,對每個球員進行檢測和追蹤,重構他們的體型和姿勢,并進行組合重建。”

該系統能夠準確預測深度圖,并將其與彩色膠片相結合,以3D形式重構每個球員。但是,目前足球的重構仍在進行中。他們寫道:“我們實現了首個端到端系統的目標,但足球的重構還未實現,這是未來繼續努力的方向。”

研究人員將比賽重置于虛擬的足球場上,在世界上任何地方通過3D或AR設備便可以從多種角度觀看比賽。他們使用微軟的全息透鏡智能眼鏡進行了測試,盡管該系統只適用于合成的比賽視頻,但他們在YouTube上找了十個高分辨率的職業足球比賽視頻,對其進行了測試,結果非常好。