Netflix也發視頻模型了:不只是“擦除”,而是“重寫”物理世界

Netflix也發視頻模型了:不只是“擦除”,而是“重寫”物理世界

概述

Netflix 推出 VOID 框架,實現對物理互動感知的視頻物件移除(Video Object Removal),該技術不僅僅是簡單地「擦除」畫面中的物件,而是透過深度學習模型對物理世界進行「重寫」,模擬真實環境中物體與環境之間的互動行為。

技術重點

  • VOID 框架結合了物理引擎與深度學習模型,能根據環境與物體的動態互動,預測並生成符合物理規律的視頻內容。
  • 該技術可應用於虛擬現實、互動式內容創作與沉浸式體驗,讓使用者在視頻中「看見」並「觸碰」虛擬物體。
  • 與傳統視頻物件移除技術不同,VOID 不僅移除物件,更會「重寫」其周圍環境的物理狀態,例如重力、碰撞與運動。

應用場景

VOID 框架可廣泛應用於:

  • 虛擬實境(VR)與擴增實境(AR)內容製作。
  • 互動式廣告與沉浸式敘事體驗。
  • 教育與訓練模擬環境,例如模擬實驗室或災難場景。

未來發展方向

隨著生成式 AI 與物理模擬技術的融合,未來將出現更多能「理解」與「模擬」真實世界行為的視頻模型,而 VOID 框架正是這項進展的重要里程碑。

來源:https://36kr.com/p/3756719276835586

返回頂端