使用场景
使用ManiWAV系统擦拭白板上的图形
利用ManiWAV翻转平底锅中的百吉饼
使用ManiWAV将骰子从一个杯子倒入另一个杯子
使用ManiWAV用Velcro胶带固定电线
产品特色
通过音频信号提供丰富的交互和物体属性信息
使用'ear-in-hand'数据收集设备同步收集音频和视觉反馈
直接从人类演示中学习机器人操控策略
在四个接触丰富的操控任务中展示系统能力
通过多样化的野外人类演示学习,实现对未见过环境的泛化
使用教程
1. 安装并设置ManiWAV数据收集设备,确保音频和视觉反馈同步
2. 收集人类演示数据,包括接触事件和物体表面材料的音频信号
3. 使用收集的数据训练机器人操控策略
4. 在不同的野外环境中测试和验证策略的有效性
5. 根据测试结果调整策略,以提高机器人的泛化能力
6. 将训练好的策略应用于实际的机器人操控任务