使用场景

电影制作人使用ReCapture为电影场景创建不同的摄像机角度和运动轨迹。

游戏开发者利用ReCapture技术从游戏录像中生成新的宣传视频。

视频编辑者使用ReCapture为社交媒体内容创造独特的视角和动态效果。

产品特色

- 多视图扩散模型或深度点云渲染：生成带有新摄像机轨迹的嘈杂锚视频。

- 掩蔽视频微调技术：通过微调学习场景动态和外观，提高视频质量。

- 场景动态学习：使用时间LoRA在掩蔽的锚视频上进行微调，学习场景动态。

- 场景外观学习：使用空间LoRA在源视频的增强帧上进行微调，学习场景外观。

- 忽略不信息区域：只学习锚视频中信息丰富的部分，忽略缺失区域。

- 增强视频模型的先验：利用视频模型的强大先验，改善视频质量。

- 支持复杂摄像机轨迹：包括绕场景中某点的轨道运动等。

使用教程

1. 提供一个用户视频作为源视频。

2. 确定新的摄像机轨迹，包括变焦、平移和倾斜等。

3. 使用多视图扩散模型或深度点云渲染生成带有新摄像机轨迹的锚视频。

4. 应用掩蔽视频微调技术，对锚视频进行微调，以学习场景动态和外观。

5. 通过微调后的模型，重新生成干净且时间上一致的重新角度视频。

6. 检查最终视频的质量，并根据需要进行进一步的调整。

7. 导出并使用生成的视频内容。