使用场景
动画师使用MotionClone根据剧本快速生成动画视频草图
视频制作者利用MotionClone根据脚本生成视频内容的初步版本
研究人员使用MotionClone进行视频生成技术的研究和开发
产品特色
无需训练即可从参考视频克隆运动
使用时间注意力机制表示视频中的运动
主时间注意力引导减轻噪声或微妙运动的影响
位置感知语义引导机制辅助生成合理的空间关系
增强视频生成模型的提示跟随能力
适用于文本到视频的可控生成
使用教程
1. 设置代码库和conda环境
2. 下载Stable Diffusion V1.5
3. 准备社区模型，包括从RealisticVision V5.1下载的社区.safetensors模型
4. 准备AnimateDiff运动模块，推荐下载v3_adapter_sd_v15.ckpt和v3_sd15_mm.ckpt.ckpt
5. 执行DDIM反转
6. 执行运动克隆
7. 如果需要，引用MotionClone相关的论文
