Diffutoon 是一種由阿里巴巴達摩院與華東師范大學聯合研發的先進動漫風格渲染技術，旨在將真實視頻轉換為逼真的動漫風格。該技術基于擴散模型（Diffusion Model），通過學習大量圖片數據生成新的圖像和視頻，從而實現高分辨率、高一致性和可編輯的卡通著色效果。

Diffutoon官網入口網址：https://ecnu-cilab.github.io/DiffutoonProjectPage/

Diffutoon開源項目地址：https://github.com/modelscope/DiffSynth-Studio

Diffutoon 的核心優勢在于其能夠處理高分辨率和快速運動的視頻，同時保持內容的一致性和視覺吸引力。其技術流程包括風格化、一致性增強、結構指導和著色四個關鍵子問題的解決。通過多模塊去噪模型、控制網絡、動畫滑動擴散、快速注意力機制等技術手段，Diffutoon 能夠生成高質量的動漫風格視頻。

Diffutoon 的主要功能包括：

• 高分辨率輸出：支持高達 1536 x 1536 的分辨率，適用于高分辨率和快速運動的視頻。
• 內容一致性：通過控制網絡和動畫滑動擴散技術，確保視頻幀間的一致性和連貫性。
• 智能編輯：用戶可以通過編輯分支根據提示生成彩色視頻信號，實現個性化內容創作。
• 自動著色：根據視頻內容和風格要求自動選擇合適的顏色填充，確保顏色協調性和視覺吸引力。
• 超分辨率與上色：即使輸入視頻分辨率較低，也能生成高質量的動漫風格視頻。

Diffutoon 的應用場景廣泛，包括動畫制作、視頻游戲開發、電影后期制作、虛擬現實和增強現實、社交媒體內容創作、廣告和營銷、教育和培訓等領域。此外，Diffutoon 的代碼和模型已開源，用戶可以通過 GitHub 平臺訪問并體驗其功能。

Diffutoon 是一項革命性的視頻轉繪技術，為創作者提供了強大的工具，使他們能夠輕松將真實視頻轉化為具有動漫風格的高質量作品。其開源特性進一步推動了技術的普及和發展，為數字創意領域帶來了無限可能。