基于词集合特征加权的跨境民族文化实体识别方法及装置

摘要

本发明涉及基于词集合特征加权的跨境民族文化实体识别方法及装置，属于自然语言处理技术领域。跨境民族文化实体通常是由描述民族文化特征的领域词汇组合构成，针对跨境民族文化实体特点，本发明提出了一种基于词集合特征加权的跨境民族文化实体识别方法，包括跨境民族文化实体数据标注和数据预处理、融入词集合特征信息的跨境民族文化文本特征表示、基于词集合特征加权的跨境民族文化实体识别模型以及跨境民族文化实体识别四个部分构成。根据这四个部分功能模块化制成基于词集合特征加权的跨境民族文化实体识别装置，对输入的句子进行实体识别，本发明解决了跨境民族文化中实体边界模糊导致实体识别困难的问题。