一种基于特定模态语义空间建模的跨模态相似性学习方法

摘要

本发明涉及一种基于特定模态语义空间建模的跨模态相似性学习方法，包括以下步骤：1.建立跨模态数据库，其中包含多种模态类型数据，并将数据库中的数据分为训练集、测试集和验证集。2.针对跨模态数据库中的每种模态类型，构造针对该特定模态的语义空间，将其他模态类型数据投射到该语义空间，得到针对该特定模态的跨模态相似度。3.将从不同模态语义空间得到的针对特定模态的跨模态相似度进行融合，得到最终跨模态相似度。4.取测试集中的任意一种模态类型作为查询模态，以另一种模态类型作为目标模态，计算查询样例和查询目标的相似性，根据相似性得到目标模态数据的相关结果列表。本发明能够提高跨模态检索的准确率。