| 专利号 | 2019103939052 | 申请日 | 2019-05-13 | 专利名称 | 基于层次标签的跨模态哈希模型构建方法、搜索方法及装置 |
| 授权日 | 2021-06-04 | 专利权人 | 山东大学 | 发明人 | 王润琦;宋雪萌;孙畅畅;崔超然;关惟俐;宓生润 |
| 主分类号 | G06F16/41 | 关键词 | 应用领域 | ||
| 摘要 | 本公开公开了一种基于层次标签的跨模态哈希模型构建方法、搜索方法及装置，接收多模态数据集，进行预处理；将预处理后的样本根据模态的不同将相对的数据输入预训练的多路径神经网络；根据预训练的神经网络和多层感知机分别提取不同模态的特征数据，得到不同模态的层次哈希表示；根据层次标签构建预处理后样本在不同层次上的相似矩阵，根据每层相似矩阵中值训练哈希表示的内积，评测样本之间的语义相似性；采用不同粒度的层次标签，并分析层次比对神经网络性能影响，确定最佳层次比；根据每层哈希表示得到哈希码；训练双路径神经网络，并使用SGD梯度下降法优化训练双路径神经网络，建立基于层次标签的深度跨模态哈希模型，用于跨模态搜索。 | ||||
| 创新点 | |||||
| 技术分类 | 标 签 | 战兴产业 | 新一代信息技术 下一代信息网络产业 | ||
| 运营方式 | 合作方式 | ||||
| 联系人 | 联系电话 | 电子邮箱 | |||
| 详细说明 | |||||
