header-langage
简体中文
繁體中文
English
Tiếng Việt
한국어
日本語
ภาษาไทย
Türkçe
扫码下载APP

Runway用互联网视频训机器人,效果几乎追平专业数据

动察 Beating AI 快讯,Runway 发布机器人模型 Praxis-1,把训练 AI 视频模型的能力用到了真实机器人上。它会先从大量普通视频里学习物体怎么运动、人怎么完成任务,再把这些经验变成机器人的动作。


Runway 做了一项物体放置测试,用互联网视频预训练后,机器人的平均误差是 16.1 厘米;改用专门采集的机器人遥操作视频,误差是 16.0 厘米。测试共做了 93 组评估,两种训练方式的结果几乎打平。


这条路线如果能继续扩大,机器人训练最缺的数据可能一下多出几个数量级。真人遥控机器人采数据,需要设备、场地和人工;普通视频早已遍布互联网。Runway 想做的,就是把这些原本不能直接控制机器人的视频,变成机器人学习动作的训练材料。


Praxis-1 已经在 Noble Machines、Standard Bots 和 Ultra 的多种机器人上测试,包括机械臂、双臂机器人和移动机器人。Runway 还展示了同一套策略从工作室换到厨房继续执行任务。模型目前只开放早期测试申请,权重计划未来几个月公开,参数量和更完整的独立评测还没有公布。

举报 纠错/举报
纠错/举报
提交
新增文库
仅自己可见
公开
保存
选择文库
新增文库
取消
完成