机器人抓取领域性能评估标准

2020-12-11 16:50:45 浏览数 (1)

前言

机器人抓取涉及检测、分割、姿态估计、抓取点检测、路径规划等任务,本文主要介绍这些任务的评估标准。

目标检测

目标检测领域主要使用IOU这一标准来评估Predict Box与Ground Truth Box之间的重合效果(定位准确性),也称之为交并比。设定Predict Box为A,Ground Truth Box为B,则两者之间的IOU为:

其中

为两个box的并集,

为两个box的交集。

目标分割

与目标检测相似,目标分割采用mIoU作为评价指标,mIoU计算Ground Truth与预测分割区域的交并比。更为准确地说,为true positives 与 sum of positives, false negatives, and false positives的比值。IoU是以每类为基础计算的,然后平均如下:

6D姿态估计

姿态主要包括旋转量R和平移量T,精度评价标准主要为ADD(Average Distance of Model Points)和ADD-S。给定一个3D模型M,设真实姿态为

,预测出的姿态为

,则ADD方式误差为:

而AAD-S方式主要通过将3D模型M通过预测的姿态映射到指定空间S,与此同时真实姿态将M映射到指定空间H。对于S空间中的每个点,搜索H空间对应的最近点,对这些对应点求平均误差。

抓取点检测

有两个指标来评估抓取检测的性能:点度量和矩形度量。前者评估预测抓取中心与实际抓取中心之间的距离阈值。针对后者,如果抓取角度在Ground Truth抓取的30°范围内,且预测抓取的Jaccard指数大于25%,则后一个度量认为抓取是正确的。

除了上述指标,还存在其它度量来评估预测的抓取点的性能,包括:

1) 成功率或准确率:在摇晃后能够举起、运输和保持所需物体的抓握百分比。

2) 准确度:抓握的成功率估计稳健性高于50%。

3) 鲁棒抓取率:估计鲁棒性高于50%的计划抓取的百分比。

4) 计划时间:接收图像和返回计划抓取之间的时间(秒)。

抓取路径规划

主要通过计算抓取尝试的成功率来定义~

参考:https://arxiv.org/abs/1905.06658

上述内容,如有侵犯版权,请联系作者,会自行删文。

0 人点赞