AutoRT是一种用于机器人智能体(Agent)大规模编排的具身基础模型系统。
机器人首先利用视觉语言模型(VLM)进行场景理解,将描述输入至大型语言模型(LLM)以得到自然语言指令;随后在另一个名为“机器人宪法”(Robot Constitution)的LLM的指导下,完善指令以实现更安全的行为。
![AutoRT](http://ai-bots.com.cn/wp-content/uploads/2024/05/1716448768-848a164b8a67363b19581f6daee22455-1.png)
其中,机器人宪法包含三类规则,分别是基本规则,机器人不得伤害人类;安全规则,机器人不得尝试涉及人类、动物或生物的任务,机器人不得与锋利的物体(例如刀)互动;具身规则,如机器人只有一只手臂,则无法执行需要两只手臂的任务。
据介绍,在7个多月的实地评估中,AutoRT系统可同时安全地协调至多20个机器人,收集了包括6650个独特任务的7.7万次机器人试验。
![AutoRT](https://pic.rmb.bdstatic.com/bjh/news/3a26837333683dbb136512843fd38dfd.gif)
▲AutoRT在8个机器人上运行的延时演示(图源:DeepMind)
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...