李飞飞团队ReKep研究获最佳论文奖,实现机器人环境自适应操纵
李飞飞团队的“关系关键点约束ReKep”研究在CoRL-LEAP研讨会上荣获最佳论文奖。该研究通过将操作行为指定为对语义关键点的时空约束函数,实现了基于视觉的环境自适应操纵。团队设计了自动化程序,利用预训练的大型视觉模型和视觉语言模型,从语言指令和RGB-D观察结果中生成ReKep。系统在轮式单臂平台和固定双臂平台上执行多种任务,如打包鞋子、双臂协同折叠衣物等,无需特定任务数据或环境模型。实验结果显示ReKep在多种任务中表现出色,尤其在外部干扰下的表现优于基准方法。来源:https://mp.weixin.qq.com/s/UOFBND8jh9pdUghc781E1A
页:
[1]