On Device Sora

使用场景创作者可以使用该模型在移动设备上快速生成短视频内容。广告商可以在移动设备上根据广告文案生成视频广告。内容开发者可以利用该模型为移动应用生成动态视频素材。...

  • On Device Sora

    类别:视频生成,AI模型,AI,视频生成,移动设备,开源,扩散模型,普通产品,开源,
    官网:https://github.com/eai-lab/On-device-Sora 更新时间:2025-08-02 10:25:35
  • 使用场景

    创作者可以使用该模型在移动设备上快速生成短视频内容。

    广告商可以在移动设备上根据广告文案生成视频广告。

    内容开发者可以利用该模型为移动应用生成动态视频素材。

    产品特色

    支持文本到视频的生成,可根据输入文本生成高质量视频。

    优化移动设备性能,适用于 iPhone 15 Pro 等设备。

    采用线性比例跳跃(LPL)技术,提高生成效率。

    支持时间维度标记合并(TDTM),降低计算资源消耗。

    提供动态加载并发推理(CI-DL),提升运行速度。

    使用教程

    1. 克隆项目仓库到本地。

    2. 安装必要的依赖包(如 Python 3.10 和相关库)。

    3. 将模型转换为 MLPackage 格式(支持 T5、STDiT 和 VAE)。

    4. 在 Xcode 中打开项目并配置 Apple 开发者账号。

    5. 在 iPhone 15 Pro 或更高版本设备上运行应用。