Workflow
RoboDexVLM
icon
搜索文档
RoboDexVLM:基于VLM分层架构的通用灵巧机器人操作
具身智能之心· 2025-09-26 00:04
点击下方 卡片 ,关注" 具身智能 之心 "公众号 >>直播和内容获取转到 → 具身智能之心知识星球 点击按钮预约直播 RoboDexVLM是 一个面向配备灵巧手的协作机械臂的创新型机器人任务规划与抓取检测框架。 现有方法通常聚焦于简化且受限的操作任务,往往忽视了以长时序方式抓取多样化物体所伴随的复杂性。相比之下, RoboDexVLM 框架利用灵巧手 能够 抓取不同形状和尺寸物体 的能力,同时基于自然语言指令执行任务。 该方法的核心组成部分如下: 首先,设计了一个具备任务级恢复机制的鲁棒任务规划器 ,它利用视觉语言模型使系统能够解析并执行开放词汇指令以完 成长序列任务。 其次,提出了一种基于机器人运动学和形式化方法的语言引导灵巧抓取感知算法 ,专为面向多样化物体和指令的零样本灵巧操作而设 计。全面的实验结果验证了 RoboDexVLM 在处理长时序场景和执行灵巧抓取方面的有效性、适应性和鲁棒性。这些结果突显了该框架在复杂环境中运行 的能力,展示了其在开放词汇灵巧操作方面的潜力。 论文标题 : RoboDexVLM: Visual Language Model-Enabled Task Planning an ...