字节跳动提出了 MagicAnimate,一种基于扩散的人体图像动画框架,旨在增强时间一致性、忠实地保留参考图像并提高动画保真度。
MagicAnimate 旨在对遵循运动序列的参考图像进行动画处理,并具有时间一致性。
跨ID动画:MagicAnimate 和 SOTA 基线之间的跨 ID 动画的混合,即使用来自不同视频的运动序列来动画参考图像。我们展示了三个身份和两个动作序列的视频结果。
将 MagicAnimate 与 T2I 扩散模型相结合:对 DALLE3 生成的参考图像进行动画处理以执行各种操作。
多人动画:按照给定的动作制作多人动画。



