Oasis是什麼
Oasis是Decart和Etched合作推出的革命性AI技術,是世界上首個實時AI世界模型,能以每秒20幀的速度實時生成交互式視頻內容,無延遲。Oasis開啓“生成式交互體驗”的新紀元,支持用戶基於文字或語音命令控制遊戲進程,爲數字內容消費和娛樂方式帶來無限可能。Oasis展示了AI在物理理解方面的能力,玩家能在遊戲中進行移動、跳躍、建造和破壞等操作。Oasis預示着由AI驅動的個性化內容新時代的到來,對遊戲、教育、娛樂和社交等多個領域產生深遠影響。
Oasis的主要功能
- 實時視頻內容生成:Oasis能以每秒20幀的速度實時生成交互式視頻內容,提供流暢的遊戲體驗。
- 交互式控制:用戶基於鍵盤和鼠標輸入,甚至文字或語音命令控制遊戲進程,實現高度互動。
- 物理世界模擬:Oasis展示物理理解能力,支持玩家在遊戲中進行移動、跳躍、建造和破壞等操作,模擬真實世界的物理規則。
- 開放世界探索:作爲開放世界遊戲,Oasis支持玩家自由探索全新生成的地圖和環境。
- 內容個性化:基於AI模型,Oasis能根據用戶的喜好和行爲即時創建個性化內容。
Oasis的技術原理
- 模型架構:Oasis基於Transformer的模型架構,包括Diffusion Transformer骨幹網絡和Transformer-based autoencoder,是專爲快速自迴歸交互式視頻生成而設計的。
- 低延遲設計:Decart團隊推出能實現低動作到幀延遲的模型架構,系統能快速響應玩家的輸入。
- 硬件優化:Oasis針對特定的GPU和服務器硬件架構進行專有系統優化,實現更高效的性能。
- Sohu芯片:Oasis將在Sohu芯片上運行,是Etched即將推出的專爲處理大規模視頻模型而設計的ASIC(專用集成電路),能支持4K分辨率下運行超過1000億參數的模型。
Oasis的項目地址
- 項目官網:oasis-model.github.io
- GitHub倉庫:https://github.com/etched-ai/open-oasis
- HuggingFace模型庫:https://huggingface.co/Etched/oasis-500m
- 在線體驗Demo: oasis.decart.ai
Oasis的應用場景
- 視頻遊戲:提供全新的遊戲體驗和無限可能的遊戲環境。
- 教育和培訓:創造模擬環境進行技能培訓和提供互動式學習體驗。
- 虛擬旅遊和探索:支持用戶探索虛擬世界和提供安全的探險體驗。
- 電影和娛樂:實時生成電影場景和創建互動式電影。
- 社交互動:開發虛擬社交平台和提供增強現實社交體驗。
© 版權聲明
文章版权归作者所有,未经允许请勿转载。
相關文章
暫無評論...