Toonflow是什麼
Toonflow 是開源的一站式 AI 短劇創作工具,將小說、劇本通過多 Agent 協作自動轉化爲結構化劇本、智能分鏡、角色視覺和動畫視頻,實現小說→劇本→分鏡→視頻,全流程 AI 自動化生產。工具支持 Windows、macOS、Linux 跨平台桌面端部署,數據完全本地存儲,助力創作者低成本批量產出視覺內容。

Toonflow的主要功能
-
AI 編劇:多 Agent 協作將小說/創意自動拆解爲場景、台詞、節奏,輸出標準劇本格式。
-
智能分鏡:自動生成精準分鏡腳本,包含景別、構圖、光線方向、鏡頭運動完整描述。
-
角色一致性保持:建立角色外貌數據庫,跨場景、跨鏡頭保持人物外貌與服裝道具高度一致。
-
AI 批量出圖:深度集成 Nano Banana、GPT Image 2、可靈、即夢、海螺等主流圖像模型,支持批量生成。
-
視頻合成輸出:自動完成配音、字幕、剪輯,成片可直接發佈,支持豎屏 9:16 和橫屏 16:9 雙格式。
-
無限畫布工作台:用類無限畫布形式自由編排劇本、角色、分鏡、素材與視頻節點,支持並行生產。
-
三層 Agent 協作體系:決策層、執行層、監督層協同,覆蓋任務拆解、內容生成、質量審閱與修訂反饋。
-
持久化 Agent 記憶:基於本地 ONNX 向量檢索的跨會話記憶系統,支持語義召回,確保多輪創作連續性。
-
可編程供應商系統:支持在設置中心直接編寫 TypeScript 供應商邏輯並即時生效,無需改源碼或重啓。
-
章節事件圖譜驅動改編:自動提取原著章節事件並結構化存儲,劇本改編按事件圖譜精準調用上下文。
Toonflow的技術原理
- 多 Agent 協作架構:Toonflow 採用三層 Agent 協作體系,分爲決策層、執行層與監督層。導演 Agent 統籌全局敘事節奏與任務優先級,編劇 Agent 負責將小說轉化爲標準劇本並優化戲劇衝突,分鏡 Agent 生成包含景別、構圖、光線與鏡頭運動的精準分鏡描述,一致性 Agent 建立角色外貌數據庫以跨場景保持人物特徵穩定,質檢 Agent 自動審查情節邏輯漏洞與角色矛盾,配音 Agent 匹配角色聲線並生成多角色語音合成腳本。各 Agent 基於 Vercel AI SDK 並行協作,通過 Socket.IO 實時通信,模擬真實影視製作團隊的分工模式。
- 持久化記憶與上下文保持:系統內置基於本地 ONNX 向量檢索的跨會話記憶系統,用 @huggingface/transformers 進行本地嵌入推理。該記憶系統支持短期消息緩存、長期摘要壓縮與語義召回,確保多輪創作中角色設定、劇情走向與風格偏好不會丟失,實現跨章節的連續敘事。
- 章節事件圖譜驅動改編:針對長篇小說改編中的信息丟失問題,Toonflow 自動提取原著章節級事件並構建結構化事件圖譜。劇本改編時,系統按事件圖譜精準調用相關上下文片段,而非一次性投餵全文,從而在控制 Token 消耗的同時,保持改編劇本與原著情節的高度 fidelity。
如何使用Toonflow
- 下載安裝:前往 GitHub Releases 頁面下載對應系統的安裝包,安裝後啓動應用。
- 配置模型:在設置中心配置文本、圖像、視頻模型供應商 API。
- 創建項目:登錄默認賬號(admin / admin123),新建項目並導入小說原著或創意文本。
- 提取事件:執行章節事件提取,自動構建原著事件圖譜,爲後續改編提供精準上下文。
- AI 編劇:進入 ScriptAgent,生成故事骨架、改編策略與結構化劇本,支持多輪迭代優化。
- 分鏡製作:切換到 ProductionAgent,在無限畫布中組織分鏡節點,批量生成角色與場景素材圖。
- 視頻生成:對分鏡圖進行節點化精調,生成視頻片段,自動完成配音、字幕與剪輯,導出成片。
Toonflow的核心優勢
-
全流程自動化:從文本到成片一站式完成,無需切換多個工具,創作效率提升 10 倍+。
-
多 Agent 協作:導演、編劇、分鏡、一致性、質檢、配音等 Agent 並行協作,輸出質量大幅超越單一 LLM 直出。
-
角色錨定系統:解決 AI 短劇最核心的”角色變臉”難題,跨場景保持人物外貌高度一致。
-
模型無關架構:不綁定任何單一平台,支持自由接入主流圖像/視頻模型,也支持本地部署模型。
-
數據完全本地:所有數據存儲在本地,不經任何第三方服務器,保障隱私安全。
-
批量工廠效率:支持整部小說批量轉換,自動規劃節奏密度,一人可跑完整生產線。
Toonflow的同類競品對比
| 對比維度 | Toonflow | Descript |
|---|---|---|
| 產品定位 | 開源 AI 短劇全鏈路工業化生產系統 | 音視頻編輯與內容創作平台 |
| 核心工作流 | 小說/創意 → 劇本 → 分鏡 → 角色 → 視頻 | 錄音/腳本 → 剪輯 → 字幕 → 發佈 |
| 目標用戶 | AI 短劇創作者、MCN、網文改編團隊、影視團隊 | 播客主、YouTuber、營銷人員、培訓師 |
| AI 編劇能力 | ✅ 多 Agent 協作,自動拆解場景/台詞/節奏,支持章節事件圖譜驅動改編 | ❌ 無原生劇本創作功能 |
| 角色一致性 | ✅ 角色錨定系統,跨場景保持人物外貌/服裝/道具高度一致 | ❌ 無角色管理或視覺一致性控制 |
| 智能分鏡 | ✅ 自動生成含景別、構圖、光線、鏡頭運動的專業分鏡腳本 | ❌ 無分鏡功能,僅有簡單圖文排列 |
| AI 視頻生成 | ✅ 對接可靈、Seedance、Nano Banana 等模型,從文本直接生成視頻素材 | ⚠️ 僅支持簡單 AI 背景生成,不直接生成 AI 視頻畫面 |
| 音頻 AI 能力 | ⚠️ 配音 Agent + TTS 多角色語音合成 | ✅ 極強:Studio Sound 降噪、Overdub 語音克隆、自動轉錄 |
| 編輯交互範式 | 節點化無限畫布 + 結構化劇本編輯 | 文本驅動編輯(像編輯 Word 一樣編輯音視頻) |
| 開源協議 | Apache-2.0(完全開源) | ❌ 閉源商業軟件 |
| 部署方式 | 本地桌面端 + Docker 自部署 + 雲端 | 純雲端 SaaS |
Toonflow的應用場景
-
短視頻內容創作:快速生成抖音、快手、B站、YouTube 等平台適配的 AI 短劇。
-
小說影視化實驗:將網絡小說自動改編爲可視化短劇,驗證 IP 改編潛力。
-
AI 文學改編工具:爲文學創作者提供從文字到視頻的自動化改編能力。
-
劇本開發與快速原型:影視團隊快速生成劇本原型與分鏡預覽,降低前期試錯成本。
-
視頻素材生成:批量生成角色設定圖、場景概念圖、視頻片段等創作素材。
© 版權聲明
文章版权归作者所有,未经允许请勿转载。
相關文章
暫無評論...