rohanpaul_ai· @rohanpaul_ai · X·· 2 小时前AI 评分
Nature Will 发布 Natura-1 机器人手部控制模型
Nature Will 发布新模型 Natura-1,用 1M hours 的第一人称人类手部操作视频训练,再用来控制真实机器人手。作者指出机器人演示数据采集慢,人类视频是更快的规模化路径,前提是技能能从人手迁移到机器手;该模型同时处理抓取后的双手精细控制、无需额外训练的新任务,以及需要记忆早期步骤并从错误中恢复的长序列操作,而许多机器人系统只在狭窄场景下展示其中一项。
要给机器人最难的一样东西,就是一双灵巧的手,而来自 @naturewill 的 Natura-1 就是一次有力的尝试。
Nature Will 用 100 万小时的第一人称人类数据训练了他们的新模型 Natura-1,
也就是人们用双手操作的第一视角视频,然后用这些数据来控制真实的机器人手。
采集机器人演示数据速度很慢,因此人类影像就成了更快的规模化路径——前提是这些技能能够从人手迁移到机器人手上。
一个模型同时解决了机器人通常会失败的三件事:抓取之后的精细双手协同控制、无需额外训练即可完成新任务,以及需要记住先前步骤并从错误中恢复的长序列操作。许多机器人系统只能在狭窄场景中展示其中一项。
来源:rohanpaul_ai · x.com