| 专利号 | 2019109954357 | 申请日 | 2019-10-18 | 专利名称 | 一种基于自权重差分编码器进行多模态特征融合的服刑人员情感识别方法 |
| 授权日 | 2020-06-30 | 专利权人 | 山东大学 | 发明人 | 李玉军;张文真;贲晛烨;刘治;朱孔凡;胡伟凤 |
| 主分类号 | G06K9/62 | 关键词 | 应用领域 | ||
| 摘要 | 本发明涉及一种基于自权重差分编码器进行多模态特征融合的服刑人员情感识别方法，包括步骤如下：(1)数据预处理：对文本数据、语音数据、微表情数据分别进行预处理，使其符合不同模态对应模型的输入要求；(2)特征提取：对预处理后的文本、语音和微表情三个模态的数据所蕴含的情感信息分别进行提取，获取对应的特征向量；(3)特征融合：采用自权重差分编码器将特征向量进行特征融合：(4)训练模型，得到最优的情感识别模型。本发明利用自权重差分编码器进行多模态特征融合，通过多个模态特征的交叉互补，有效降低了单模态数据的局限性和错误信息的负面影响，使提取到的情感特征更加丰富、有效和准确，提高了服刑人员的情感识别效果。 | ||||
| 创新点 | |||||
| 技术分类 | 标 签 | 战兴产业 | 新一代信息技术 人工智能 | ||
| 运营方式 | 合作方式 | ||||
| 联系人 | 联系电话 | 电子邮箱 | |||
| 详细说明 | |||||
