模型介紹頁面
https://humanaigc.github.io/animate-anyone
Animate Anyone 是一個工具，可以將靜態圖片和骨架動畫結合起來，生成動態影片。它使用先進的 AI 技術，保留圖片細節並保持動畫的連貫性。這個工具適合用於人類角色、動漫和時尚視頻等的動畫製作。
模型概念
- 使用 Pose Guider 編碼姿勢序列並融合多幀噪音。
- 使用 Denoising UNet 去噪並生成視頻。
- Denoising UNet 包含空間、交叉和時間注意力模塊。
- 參考圖像的詳細特徵通過 ReferenceNet 提取，語義特徵通過 CLIP 圖像編碼器提取。
- 最後，VAE 解碼器將結果解碼為視頻片段。
GitHub位置
https://github.com/HumanAIGC/AnimateAnyone
不過我們可以看到現在這個Github上只有介紹而已，但是他們說因為他們正在把原始碼改得更易讀，所以仍需一些時間才能夠把開源代碼上傳上來，就讓我們持續等待吧~
