Maniwav

使用场景使用ManiWAV系统擦拭白板上的图形利用ManiWAV翻转平底锅中的百吉饼使用ManiWAV将骰子从一个杯子倒入另一个杯子使用ManiWAV用Velc...

  • Maniwav

    类别:AI机器人,AI学习,机器人学习,音频视觉数据,野外数据,泛化能力,普通产品,开源,
    官网:https://mani-wav.github.io/ 更新时间:2025-08-01 18:31:44
  • 使用场景

    使用ManiWAV系统擦拭白板上的图形

    利用ManiWAV翻转平底锅中的百吉饼

    使用ManiWAV将骰子从一个杯子倒入另一个杯子

    使用ManiWAV用Velcro胶带固定电线

    产品特色

    通过音频信号提供丰富的交互和物体属性信息

    使用'ear-in-hand'数据收集设备同步收集音频和视觉反馈

    直接从人类演示中学习机器人操控策略

    在四个接触丰富的操控任务中展示系统能力

    通过多样化的野外人类演示学习,实现对未见过环境的泛化

    使用教程

    1. 安装并设置ManiWAV数据收集设备,确保音频和视觉反馈同步

    2. 收集人类演示数据,包括接触事件和物体表面材料的音频信号

    3. 使用收集的数据训练机器人操控策略

    4. 在不同的野外环境中测试和验证策略的有效性

    5. 根据测试结果调整策略,以提高机器人的泛化能力

    6. 将训练好的策略应用于实际的机器人操控任务