Toonflow – 開源的一站式 AI 短劇創作工具

AI工具14小時前發佈新公告 AI管理員
0 0

Toonflow是什麼

Toonflow 是開源的一站式 AI 短劇創作工具,將小說、劇本通過多 Agent 協作自動轉化爲結構化劇本、智能分鏡、角色視覺和動畫視頻,實現小說→劇本→分鏡→視頻,全流程 AI 自動化生產。工具支持 Windows、macOS、Linux 跨平台桌面端部署,數據完全本地存儲,助力創作者低成本批量產出視覺內容。

Toonflow – 開源的一站式 AI 短劇創作工具

Toonflow的主要功能

  • AI 編劇:多 Agent 協作將小說/創意自動拆解爲場景、台詞、節奏,輸出標準劇本格式。
  • 智能分鏡:自動生成精準分鏡腳本,包含景別、構圖、光線方向、鏡頭運動完整描述。
  • 角色一致性保持:建立角色外貌數據庫,跨場景、跨鏡頭保持人物外貌與服裝道具高度一致。
  • AI 批量出圖:深度集成 Nano Banana、GPT Image 2、可靈、即夢、海螺等主流圖像模型,支持批量生成。
  • 視頻合成輸出:自動完成配音、字幕、剪輯,成片可直接發佈,支持豎屏 9:16 和橫屏 16:9 雙格式。
  • 無限畫布工作台:用類無限畫布形式自由編排劇本、角色、分鏡、素材與視頻節點,支持並行生產。
  • 三層 Agent 協作體系:決策層、執行層、監督層協同,覆蓋任務拆解、內容生成、質量審閱與修訂反饋。
  • 持久化 Agent 記憶:基於本地 ONNX 向量檢索的跨會話記憶系統,支持語義召回,確保多輪創作連續性。
  • 可編程供應商系統:支持在設置中心直接編寫 TypeScript 供應商邏輯並即時生效,無需改源碼或重啓。
  • 章節事件圖譜驅動改編:自動提取原著章節事件並結構化存儲,劇本改編按事件圖譜精準調用上下文。

Toonflow的技術原理

  • 多 Agent 協作架構:Toonflow 採用三層 Agent 協作體系,分爲決策層、執行層與監督層。導演 Agent 統籌全局敘事節奏與任務優先級,編劇 Agent 負責將小說轉化爲標準劇本並優化戲劇衝突,分鏡 Agent 生成包含景別、構圖、光線與鏡頭運動的精準分鏡描述,一致性 Agent 建立角色外貌數據庫以跨場景保持人物特徵穩定,質檢 Agent 自動審查情節邏輯漏洞與角色矛盾,配音 Agent 匹配角色聲線並生成多角色語音合成腳本。各 Agent 基於 Vercel AI SDK 並行協作,通過 Socket.IO 實時通信,模擬真實影視製作團隊的分工模式。
  • 持久化記憶與上下文保持:系統內置基於本地 ONNX 向量檢索的跨會話記憶系統,用 @huggingface/transformers 進行本地嵌入推理。該記憶系統支持短期消息緩存、長期摘要壓縮與語義召回,確保多輪創作中角色設定、劇情走向與風格偏好不會丟失,實現跨章節的連續敘事。
  • 章節事件圖譜驅動改編:針對長篇小說改編中的信息丟失問題,Toonflow 自動提取原著章節級事件並構建結構化事件圖譜。劇本改編時,系統按事件圖譜精準調用相關上下文片段,而非一次性投餵全文,從而在控制 Token 消耗的同時,保持改編劇本與原著情節的高度 fidelity。

如何使用Toonflow

  • 下載安裝:前往 GitHub Releases 頁面下載對應系統的安裝包,安裝後啓動應用。
  • 配置模型:在設置中心配置文本、圖像、視頻模型供應商 API。
  • 創建項目:登錄默認賬號(admin / admin123),新建項目並導入小說原著或創意文本。
  • 提取事件:執行章節事件提取,自動構建原著事件圖譜,爲後續改編提供精準上下文。
  • AI 編劇:進入 ScriptAgent,生成故事骨架、改編策略與結構化劇本,支持多輪迭代優化。
  • 分鏡製作:切換到 ProductionAgent,在無限畫布中組織分鏡節點,批量生成角色與場景素材圖。
  • 視頻生成:對分鏡圖進行節點化精調,生成視頻片段,自動完成配音、字幕與剪輯,導出成片。

Toonflow的核心優勢

  • 全流程自動化:從文本到成片一站式完成,無需切換多個工具,創作效率提升 10 倍+。
  • 多 Agent 協作:導演、編劇、分鏡、一致性、質檢、配音等 Agent 並行協作,輸出質量大幅超越單一 LLM 直出。
  • 角色錨定系統:解決 AI 短劇最核心的”角色變臉”難題,跨場景保持人物外貌高度一致。
  • 模型無關架構:不綁定任何單一平台,支持自由接入主流圖像/視頻模型,也支持本地部署模型。
  • 數據完全本地:所有數據存儲在本地,不經任何第三方服務器,保障隱私安全。
  • 批量工廠效率:支持整部小說批量轉換,自動規劃節奏密度,一人可跑完整生產線。

Toonflow的同類競品對比

對比維度 Toonflow Descript
產品定位 開源 AI 短劇全鏈路工業化生產系統 音視頻編輯與內容創作平台
核心工作流 小說/創意 → 劇本 → 分鏡 → 角色 → 視頻 錄音/腳本 → 剪輯 → 字幕 → 發佈
目標用戶 AI 短劇創作者、MCN、網文改編團隊、影視團隊 播客主、YouTuber、營銷人員、培訓師
AI 編劇能力 ✅ 多 Agent 協作,自動拆解場景/台詞/節奏,支持章節事件圖譜驅動改編 ❌ 無原生劇本創作功能
角色一致性 ✅ 角色錨定系統,跨場景保持人物外貌/服裝/道具高度一致 ❌ 無角色管理或視覺一致性控制
智能分鏡 ✅ 自動生成含景別、構圖、光線、鏡頭運動的專業分鏡腳本 ❌ 無分鏡功能,僅有簡單圖文排列
AI 視頻生成 ✅ 對接可靈、Seedance、Nano Banana 等模型,從文本直接生成視頻素材 ⚠️ 僅支持簡單 AI 背景生成,不直接生成 AI 視頻畫面
音頻 AI 能力 ⚠️ 配音 Agent + TTS 多角色語音合成 極強:Studio Sound 降噪、Overdub 語音克隆、自動轉錄
編輯交互範式 節點化無限畫布 + 結構化劇本編輯 文本驅動編輯(像編輯 Word 一樣編輯音視頻)
開源協議 Apache-2.0(完全開源) ❌ 閉源商業軟件
部署方式 本地桌面端 + Docker 自部署 + 雲端 純雲端 SaaS

Toonflow的應用場景

  • 短視頻內容創作:快速生成抖音、快手、B站、YouTube 等平台適配的 AI 短劇。
  • 小說影視化實驗:將網絡小說自動改編爲可視化短劇,驗證 IP 改編潛力。
  • AI 文學改編工具:爲文學創作者提供從文字到視頻的自動化改編能力。
  • 劇本開發與快速原型:影視團隊快速生成劇本原型與分鏡預覽,降低前期試錯成本。
  • 視頻素材生成:批量生成角色設定圖、場景概念圖、視頻片段等創作素材。
© 版權聲明

相關文章

暫無評論

暫無評論...