讨论

3D视觉引导机器人抓取散乱件,深度学习模型部署慢到怀疑人生

老袁
老袁
2026/03/29 13:44

项目场景:汽车零部件厂,一条线上料工位,料筐里几十种规格的金属小件混着摆,机器人要从里面抓指定的那一款。工件反光、堆叠、互相遮挡都有。之前用的2D视觉方案漏检率太高被甲方打回来了,现在换了3D结构光+点云配准,识别率是上去了,但每次换产品规格,光是重新标定和训练就得折腾两三天。

想问下做过类似项目的大佬,3D视觉引导这块,模型训练和部署有没有什么轻量化的路子?现场工程师根本不会调参,每次都等我远程搞,停产损失算我的。还有点云配准那块,用的ICP还是基于深度学习的PointNet+Transformer效果更好?我们点云噪声其实不算大。

19 3

全部回复 (3)

gao2003
gao2003#1

我们去年做过一个差不多场景的,料筐抓取铝压铸件混料。3D视觉用的大族机器人的,配套的软件里有个快速示教的工具,不需要训练模型,直接拖拽几个特征点定义抓取位姿,新规格切换半小时内能搞定。深度学习那条路我们后来没走,太重,现场维护成本扛不住。你们用的哪家3D相机?如果是大族、悉那特、梅卡曼德这几家的,建议直接问原厂有没有快速示教功能,比你自己折腾模型省事得多。

2026/03/29 23:36
阿凯
阿凯#2

点云配准这块我有点不同看法,结构光出来的点云精度本身就到0.1mm级了,ICP够用,前提是你初始位姿别差太远。你可以把粗定位用2D的模板匹配先做一把,给个±5°的初始位姿,再上ICP,速度和稳定性都能兼顾。PointNet+Transformer那套对噪声确实鲁棒,但推理时间长,对硬件要求也高,工业现场用FPGA或工控机部署的话,实时性反而是倒退。

2026/03/31 04:50
8866
8866#3

反问一下,料筐尺寸多大?工件尺寸范围多少?反光件你用的哪种3D方案,蓝光还是红外?

2026/03/31 12:49