MimicTalk

MimicTalk是由浙江大学与字节跳动合作研发的一种基于NeRF（神经辐射场）技术的创新工具，能够在短短15分钟内完成对新身份的高效训练，生成高度个性化且具备丰富表现力的3D说话人脸模型。该工具通过优化的微调策略及具备上下文学习能力的人脸动作生成模型，显著提升了生成视频的质量。MimicTalk的代码源自于先前的Real3D-Portrait项目，并在此基础上进行了进一步改进，支持使用音频驱动生成特定人物的说话头像，使得生成的数字人视频在感官上与真人高度一致。