Animate Anyone – 阿里開源的圖像到視頻角色動畫合成的框架

AI工具8個月前發佈新公告 AI管理員
8 0

Animate Anyone是由阿里巴巴智能計算研究院推出的一款將靜態圖像中的角色或人物進行動態化的開源框架,已在GitHub上斬獲了近1.3萬個星標,並在國內外引起了熱烈的討論。該框架在擴散模型的基礎之上,引入了ReferenceNet、Pose Guider姿態引導器和時序生成模塊等技術,以實現照片動起來時保持一致性、可控性和穩定性,輸出高質量的動態化視頻。阿里旗下的AI聊天助手通義千問裏面的「通義舞王」功能便是基於該技術,可讓照片中的人物/角色跳起科目三、抖肩舞、鬼步舞等。

Animate Anyone - 阿里開源的圖像到視頻角色動畫合成的框架

Animate Anyone的應用場景

  • 角色動態化:無論是真人、動漫角色還是卡通形象或人形物體,Animate Anyone都能讓它們動起來,爲各種創意項目增添樂趣。
  • 時尚視頻合成:在時尚領域,Animate Anyone能夠將靜態模特轉化爲動態展示,實現不同角度和着裝效果的動態展示,爲服裝展示提供新的視覺體驗。
  • 人類舞蹈生成:Animate Anyone 通過結合參考圖像和姿態骨架動畫,能夠生成逼真的舞蹈視頻,可以讓一本真經的人物也跳起舞來。

如何使用Animate Anyone

Animate Anyone的項目主頁爲https://humanaigc.github.io/animate-anyone/,GitHub代碼庫地址爲https://github.com/HumanAIGC/AnimateAnyone,可以通過通義千問APP或Hugging Face進行在線快速體驗:

  1. Hugging Face社區Demo:訪問https://huggingface.co/spaces/xunsong/Moore-AnimateAnyone,上傳或拖放圖像、添加動態姿態圖並調節參數後點擊Animate即可讓圖片中的角色動起來
  2. 通義千問:手機上安裝通義千問APP,然後在指令中心中選擇「一張照片來跳舞」或直接輸入通義舞王,選擇你感興趣的舞蹈模版、上傳靜態照片然後即可生成動態視頻
© 版權聲明

相關文章

暫無評論

暫無評論...