DreamActor

DreamActor-M1是由字节跳动开发的一种先进的AI图像动画框架，能够将静态人物照片转换为生动的动态视频。该框架采用混合引导机制，结合隐式面部表示、3D头部球体和3D身体骨架等控制信号，实现对人物面部表情与身体动作的精准操控。它支持多语言语音驱动的面部动画生成，可实现口型同步效果，并具备高保真度和身份保持能力，确保生成视频在时间上具有高度连贯性。 DreamActor-M1的主要功能包括：将静态照片与参考动作视频结合，生成高质量动态影像；提供精细的动作控制能力；支持部分运动传递，如面部表情和头部动作；扩展至音频驱动的面部动画；通过骨骼长度调整技术实现形状适应的动画生成；并能适配多种角色风格和视角变化。 在技术原理方面，DreamActor-M1通过多尺度适应性处理不同姿势和分辨率的图像，确保生成动画的长期时间一致性，并具备强大的形状感知能力。此外，它还支持多语言语音驱动的面部动画，提升真实感与互动性。