| 专利号 | 2021112142874 | 申请日 | 2021-10-19 | 专利名称 | 深度对抗注意力跨模态哈希检索方法及系统 |
| 授权日 | 2024-07-19 | 专利权人 | 山东师范大学 | 发明人 | 张化祥;王本惠;刘丽;朱磊;孙建德;聂礼强;金圣开 |
| 主分类号 | G06F16/432 | 关键词 | 应用领域 | ||
| 摘要 | 本发明提出了深度对抗注意力跨模态哈希检索方法及系统，包括：注意力学习步骤：获得图像和文本两种模态，利用通道注意力机制，将每个模态的特征表示分为相关的模态特征和不相关的模态特征；模内对抗学习步骤：通过生成对抗网络将每个模态内的不相关特征补充每个模态的相关特征表示信息；模间对抗学习学习步骤：将图像模态的相关的模态特征设为真，将文本模态的相关的模态特征设为假，通过模间对抗学习使得两种模态各自的相关特征表示分布均匀；哈希学习步骤：将图像相关特征和文本相关特征映射在汉明空间中，用于进行跨模态检索。将生成对抗网络、注意力机制、哈希学习结合在一起，相比较之前跨模态检索方法，进一步提高了跨模态检索的准确度。 | ||||
| 创新点 | |||||
| 技术分类 | 标 签 | 战兴产业 | 新一代信息技术 下一代信息网络产业 | ||
| 运营方式 | 合作方式 | ||||
| 联系人 | 联系电话 | 电子邮箱 | |||
| 详细说明 | |||||
