AniPortrait 是由騰訊游戲智跡團隊研發的一款開源 AI 工具,旨在通過音頻和參考肖像圖像生成高質量的動態視頻動畫。該項目的核心功能是將靜態肖像轉化為生動的動畫形象,同時支持音頻驅動的面部表情和頭部姿勢控制,使生成的動畫與輸入音頻同步,呈現出逼真的視覺效果。
- AniPortrait項目官網入口網址:https://github.com/Zejun-Yang/AniPortrait
- AniPortrait在線演示網址:https://huggingface.co/spaces/ZJYang/AniPortrait_official

AniPortrait 的工作流程分為兩個主要階段:首先是 Audio2Lmk(音頻到 2D 面部標記點),該模塊從音頻中提取關鍵信息,包括面部表情和頭部姿態的 3D 網格和頭部姿態信息;其次是 Lmk2Video(2D 面部標記點到視頻),該模塊利用提取的面部特征生成高質量的動態視頻。此外,AniPortrait 還支持人臉重繪功能,允許用戶將照片中的人物替換到源視頻中,從而實現更加靈活的動畫創作。
AniPortrait 的技術特點包括:
- 音頻驅動的動畫合成:通過分析音頻中的語音節奏和音調,自動調整人物的面部表情和口型,使其能夠說話或唱歌。
- 高質量的視覺效果:利用擴散模型和運動模塊,生成高分辨率、時間一致性的逼真動畫。
- 靈活的模型配置:用戶可以根據需求調整模型權重和配置參數,以實現個性化的動畫效果。
- 廣泛的應用場景:適用于游戲開發、虛擬主播、社交媒體內容創作、藝術創作等多個領域。
AniPortrait 的開源特性使其具有較高的靈活性和擴展性。用戶可以通過 GitHub 獲取代碼并進行定制開發,同時社區提供了詳細的文檔和支持,幫助新手快速上手。此外,AniPortrait 還支持多種語言,并且能夠適應不同的硬件配置,進一步提升了其普適性和實用性。
AniPortrait 是一個功能強大且靈活的 AI 動畫生成工具,能夠滿足用戶在動態視頻制作中的多樣化需求。無論是專業人士還是普通用戶,都可以通過 AniPortrait 創作出獨一無二的藝術作品或實用內容。
相關導航

暫無評論...