[发明专利]基于语义树增强的复杂文本查询到视频的跨模态检索方法有效
| 申请号： | 202010686024.2 | 申请日： | 2020-07-16 |
| 公开（公告）号： | CN111897913B | 公开（公告）日： | 2022-06-03 |
| 发明（设计）人： | 董建锋;彭敬伟;杨勋;郑琪;王勋 | 申请（专利权）人： | 浙江工商大学 |
| 主分类号： | G06F16/33 | 分类号： | G06F16/33;G06F16/783;G06F40/30;G06N3/04 |
| 代理公司： | 杭州求是专利事务所有限公司 33200 | 代理人： | 刘静 |
| 地址： | 310018 浙江*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于语义树增强的复杂文本查询到视频的跨模态检索方法。对于复杂文本查询语句，将其各个单词转换成叶子节点表示，挖掘子节点之间的关系，将两个依赖性最高的子节点进行合并，通过递归的方式构建查询语句的语义树结构，得到基于语义树增强的查询表示。对于候选视频的编码，通过CNN获得视频初步特征，利用GRU和自注意力机制模块捕获视频之间的时间依赖性和语义相关性，得到鲁棒的视频特征表示。将复杂文本查询表示和视频特征表示映射到公共空间中，自动学习两者的匹配关系，从而实现复杂文本查询到视频的跨模态检索。本发明方法不仅可以解释复杂文本查询语句中的信息成分，更好的理解用户意图，并且在很大程度上提高了检索的性能。 | ||
| 搜索关键词： | 基于 语义 增强 复杂 文本 查询 视频 跨模态 检索 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于浙江工商大学，未经浙江工商大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202010686024.2/，转载请声明来源钻瓜专利网。
