Oasis – Decart聯合Etched推出首個實時生成交互式視頻內容的AI模型

AI工具1周前發佈新公告 AI管理員
4 0

Oasis是什麼

Oasis是Decart和Etched合作推出的革命性AI技術,是世界上首個實時AI世界模型,能以每秒20幀的速度實時生成交互式視頻內容,無延遲。Oasis開啓“生成式交互體驗”的新紀元,支持用戶基於文字或語音命令控制遊戲進程,爲數字內容消費和娛樂方式帶來無限可能。Oasis展示了AI在物理理解方面的能力,玩家能在遊戲中進行移動、跳躍、建造和破壞等操作。Oasis預示着由AI驅動的個性化內容新時代的到來,對遊戲、教育、娛樂和社交等多個領域產生深遠影響。

Oasis – Decart聯合Etched推出首個實時生成交互式視頻內容的AI模型

Oasis的主要功能

  • 實時視頻內容生成:Oasis能以每秒20幀的速度實時生成交互式視頻內容,提供流暢的遊戲體驗。
  • 交互式控制:用戶基於鍵盤和鼠標輸入,甚至文字或語音命令控制遊戲進程,實現高度互動。
  • 物理世界模擬:Oasis展示物理理解能力,支持玩家在遊戲中進行移動、跳躍、建造和破壞等操作,模擬真實世界的物理規則。
  • 開放世界探索:作爲開放世界遊戲,Oasis支持玩家自由探索全新生成的地圖和環境。
  • 內容個性化:基於AI模型,Oasis能根據用戶的喜好和行爲即時創建個性化內容。

Oasis的技術原理

  • 模型架構:Oasis基於Transformer的模型架構,包括Diffusion Transformer骨幹網絡和Transformer-based autoencoder,是專爲快速自迴歸交互式視頻生成而設計的。
  • 低延遲設計:Decart團隊推出能實現低動作到幀延遲的模型架構,系統能快速響應玩家的輸入。
  • 硬件優化:Oasis針對特定的GPU和服務器硬件架構進行專有系統優化,實現更高效的性能。
  • Sohu芯片:Oasis將在Sohu芯片上運行,是Etched即將推出的專爲處理大規模視頻模型而設計的ASIC(專用集成電路),能支持4K分辨率下運行超過1000億參數的模型。

Oasis的項目地址

  • 項目官網:oasis-model.github.io
  • GitHub倉庫:https://github.com/etched-ai/open-oasis
  • HuggingFace模型庫:https://huggingface.co/Etched/oasis-500m
  • 在線體驗Demooasis.decart.ai

Oasis的應用場景

  • 視頻遊戲:提供全新的遊戲體驗和無限可能的遊戲環境。
  • 教育和培訓:創造模擬環境進行技能培訓和提供互動式學習體驗。
  • 虛擬旅遊和探索:支持用戶探索虛擬世界和提供安全的探險體驗。
  • 電影和娛樂:實時生成電影場景和創建互動式電影。
  • 社交互動:開發虛擬社交平台和提供增強現實社交體驗。
© 版權聲明

相關文章

暫無評論

暫無評論...