| 专利号 | 202210716885X | 申请日 | 2022-06-23 | 专利名称 | 基于Bert和自注意机制的图文匹配方法及系统 |
| 授权日 | 2025-09-26 | 专利权人 | 齐鲁工业大学(山东省科学院) | 发明人 | 孙涛;魏记书;权志邦;张子豪;钟慎杰 |
| 主分类号 | G06F16/583 | 关键词 | 应用领域 | ||
| 摘要 | 本公开提供了一种基于Bert和自注意机制的图文匹配方法及系统，其属于图文匹配技术领域，所述方案包括获取待匹配的图像及文本数据；将所述待匹配的图像及文本数据输入预先训练的图文匹配模型中，获得所述图像数据与文本数据之间的相似度；基于所述相似度的大小确定图像和文本的匹配关系；其中，所述图文匹配模型具体处理过程为：所述图像数据经图像区域语义特征提取模块提取图像语义特征，所述文本数据经文本特征提取模块提取文本特征，基于获得的图像语义特征和文本特征，通过交叉注意及相似注意过滤模块实现图像区域和单词的对齐并去除冗余信息，最后通过全连接层获得相似度结果。 | ||||
| 创新点 | |||||
| 技术分类 | 标 签 | 战兴产业 | 新一代信息技术 下一代信息网络产业 | ||
| 运营方式 | 合作方式 | ||||
| 联系人 | 联系电话 | 电子邮箱 | |||
| 详细说明 | |||||
