游客发表

这项由斯坦福大学与康奈尔大学联合开展的斯坦前沿研究于2026年6月24日正式发布,论文编号为 arXiv:2606.26428。福康感兴趣的机器研究人员可通过该编号获取完整技术文档。
人类的手部操作是生物进化中的奇迹。熟练工人能将细螺丝精准旋入螺孔,再精或将精密零件嵌入仅大0.5毫米的通精卡槽,这对人类而言轻而易举,密装却是配成机器人面临的巨大技术壁垒。
尽管多指机械手在理论灵活性上媲美人手,功率高达但在实际精密装配中仍面临两大主流技术路径的斯坦困境:
以往研究多采用“曲线救国”方案,如使用专用夹爪或固定夹具来简化任务。然而,这些方案缺乏通用性,更换零件即需重新设计硬件。
斯坦福与康奈尔团队提出全新思路:Play2Perfect(从玩耍到精通)。该框架借鉴人类成长逻辑——在掌握高难度技能前,先通过“玩耍”积累基础运动能力。
Play2Perfect中的“玩耍”并非随机乱动,而是经过精心设计的预训练阶段。机器人在模拟环境中抓取并移动各类积木至随机目标位。为确保预训练的有效性,团队设计了四个关键维度:
系统自动生成1000种不同形状(长方体、圆柱体)和重量分布(如头重脚轻)的积木。
* 目的:防止机器人针对单一物体形成特定的“捷径”策略,迫使机器人学习通用的抓握与操控逻辑。
不仅要求移动物体位置,更要求调整物体姿态(Orientation)。
* 关键性:精密装配(如T形零件插入T形卡口)对朝向极度敏感。仅练习平移无法习得手指翻转物体的精细技能。
目标序列随机生成,包含大幅度的旋转变化。
* 类比:如同钢琴练习音阶而非重复单曲,确保技能具备泛化能力,而非僵化的肌肉记忆。
仅当积木距离目标1厘米以内才算成功。
* 对比:若放宽至5-10厘米,机器人将学会粗放的手臂摆动;1厘米的精度迫使机器人开发指尖微调能力。
硬件与算力配置:
* 执行器:22自由度五指机械手(Sharpa)+ 7轴工业机械臂(KUKA iiwa 14)。
* 仿真环境:NVIDIA Isaac Sim,24,576个并行环境。
* 训练效率:在单块NVIDIA RTX A6000显卡上训练7天,相当于数年的经验压缩。
预训练结束后,保存的“玩耍策略”作为装配任务的初始权重(即“技能手册”)。
装配阶段仅给予最终成功的稀疏奖励。为解决探索难题,系统基于CAD图纸自动推导中间里程碑:
* 插孔任务:生成“预插入姿态”(悬停对准)。
* 螺丝任务:沿螺纹路径每90度设置检查点。
* 核心逻辑:“拆卸即装配”。通过逆向拆解步骤生成正向装配路径,无需人工标注,直接利用CAD数据。
部署阶段使用 FoundationPose视觉算法,实时读取CAD模型以匹配摄像头画面。
* 控制频率:60Hz控制 + 30Hz视觉更新,确保闭环流畅。
研究团队设置了严格的对照组,验证预训练的重要性:
| 实验组别 | 训练方式 | 训练时长 | 成功率 | 策略质量 |
|---|---|---|---|---|
| Play2Perfect | 预训练 + 装配微调 | 2-5小时 | 高 | 多指稳固抓握,抗干扰能力强 |
| 基线1 | 从零开始 + 稀疏奖励 | 24小时 | ≈0% | 无法收敛 |
| 基线2 | 从零开始 + 密集奖励 | 24小时 | ≈0% | 学会“平衡技巧”(拇指顶底),抗扰动极差 |
关键发现:
* 在简化版任务中,基线2需100+小时训练,而Play2Perfect仅需4小时(效率提升33倍)。
* 基线2学到的“平衡策略”在受到10牛顿侧向力时成功率跌至20%;Play2Perfect在多指抓握策略下,抗扰动成功率保持在75%以上。
团队进一步分析了预训练各要素的贡献度:
核心结论:预训练的价值在于迫使机器人使用手指而非仅靠手臂控制物体。任何降低精度、简化目标或固定轨迹的设计都会削弱迁移效果。
所有策略直接部署至实体机器人,未经额外微调。
对比“仅预训练”与“预训练+装配微调”:
行为差异本质:
* “只玩”策略:将接触视为干扰,直接施力插入,易卡死。
* Play2Perfect策略:学会“感知接触-局部搜索-调整角度-最终插入”的闭环。这种接触感知能力必须通过装配特化训练获得,无法仅通过自由空间玩耍习得。
Play2Perfect框架证明,解决精密装配难题的最佳路径是系统性基本功训练。预训练设计需满足:
1. 足够复杂(避免技能无法迁移)。
2. 高度泛化(避免过拟合固定轨迹)。
3. 高精度要求(激发指尖微调能力)。
4. 多维耦合(平移与旋转缺一不可)。
目前系统尚需外部辅助完成工件识别与多步骤衔接,但从0.5mm间隙的成功率来看,这已是多指机械手在精密装配领域的重要里程碑。
参考文献与资源:
* 论文全文:arXiv:2606.26428
* 演示视频:play2perfect.github.io
Q1:Play2Perfect的“玩耍预训练”与普通强化学习有何本质区别?
A:普通强化学习直接针对目标任务(如装配)从零开始,奖励稀疏且探索困难。Play2Perfect将任务解耦:第一阶段完全不涉及装配,而是通过抓取、操控多样化积木至随机位姿,积累通用的抓握、翻转及精细控制能力。第二阶段再基于此基础学习装配特有的接触动作,大幅缩短收敛时间并提高策略鲁棒性。
Q2:机器人在真实世界0.5毫米间隙装配中具体如何操作?
A:机器人利用FoundationPose算法以60Hz频率实时感知零件位姿。接近孔口时,不直接猛插,而是执行小范围搜索动作,利用零件与孔口边缘的接触反馈调整对准角度。待感知到对准状态后,才施加插入力。这一策略源于装配微调训练,而非预设程序。
Q3:为何不直接使用密集奖励从零训练,而要先玩耍再装配?
A:实验表明,即使使用精心设计的密集奖励,从零训练仍需100+小时,且习得的策略脆弱(如仅靠拇指平衡,抗扰动差)。Play2Perfect通过7天预训练+4小时微调,效率提升33倍,且习得的多指抓握策略在扰动下依然稳定。根本原因在于精密装配技能链过长,预训练提前解决了前段基础技能,避免了漫长的探索过程。
随机阅读
热门排行
友情链接