利用光流指导特征融合的物体实例分割方法

摘要

本发明提供了一种利用光流指导特征融合的物体实例分割方法，对视频帧使用深度神经网络进行光流动作信息提取和特征提取，利用光流携带的动作信息对特征进行融合，对速度精度进行权衡应用。在融合之后，通过后续网络生成类别信息、定位框、分割掩膜信息，进行比对定位框实现追踪。在实际应用中无需先验信息和人工标注，能够对追踪目标进行特定分割淹没标注追踪，分割级别提供了追踪目标更多的信息，最终通过视频中的实例分割技术能够有效解决视频中的物品追踪和定位问题。