一种多指灵巧手分拣规划方法

摘要

本发明公开了一种多指灵巧手分拣规划方法，包括：捕捉包含目标物体的彩色图像与深度图像；基于单图多框目标检测网络，从彩色图像中提取出若干包含单个目标物体的边界框，并基于边界框从深度图像中裁剪出相应的目标物体的深度图像；对于每个目标物体，若通过判断确定数据库中存在包含相同单个目标物体的深度图像，则提取数据库中相应的抓取点与抓取质量；否则，基于目标物体的深度图像计算抓取点与抓取质量；基于各目标物体对应的抓取质量，决策目标物体分拣次序，从而结合目标物体对应的抓取点驱动多指灵巧手抓取目标物体，并分拣至指定区域。该方法采用基于深度学习的规划策略，能在提升泛化性的同时，让多指灵巧手更有效地学习人类的行为。