| 专利号 | 2023106918980 | 申请日 | 2023-06-12 | 专利名称 | 基于常识信息辅助的视觉自然语言导航系统及方法 |
| 授权日 | 2024-01-26 | 专利权人 | 山东大学 | 发明人 | 程吉禹;赵昊天;陈佳铭;张伟;宋然;李晓磊 |
| 主分类号 | G06F16/332 | 关键词 | 应用领域 | ||
| 摘要 | 本发明公开了基于常识信息辅助的视觉自然语言导航方法及系统，属于视觉语言导航技术领域。本发明借鉴语义推理的思想，对输入的指令信息进行特征提取，对这些特征信息进行推理和添加常识性信息作为额外信息输入参与决策；利用跨模态Transformer，将输入的语言指令、环境输入和扩充信息聚合，获取目标预测点，进行智能体的行动控制；能够提高视觉自然语言导航的准确性。解决了现有技术中存在“不能使智能体真正理解语言中语义信息与实际场景之间的关系”的问题。 | ||||
| 创新点 | |||||
| 技术分类 | 标 签 | 战兴产业 | 新一代信息技术 下一代信息网络产业 | ||
| 运营方式 | 合作方式 | ||||
| 联系人 | 联系电话 | 电子邮箱 | |||
| 详细说明 | |||||
