刘立波教授团队在视频文本跨模态检索领域取得新进展
文摘
2024-07-03 16:54
宁夏
我院刘立波教授、邓箴副教授（准聘）指导的2021级硕士研究生陈磊在视频文本跨模态检索方向取得重要研究进展。研究团队针对视频文本跨模态检索中弱相关数据中成对数据关联不可靠、非成对数据关联不确定带来的跨模态交互困难问题，提出一种多层次语义交互对齐方法和模型，有效降低了视频内容的冗余，增强了模态间的语义交互，提升了对弱相关文本和视频内容的精确对齐，并利用锚帧策略弥补了局部特征提取与单词选择的不足。在多个常用公开数据集上的实验结果表明，该模型提升了视频文本跨模态检索的准确率，特别是在处理弱相关数据时，能够返回更为精确的结果。研究相关成果以“Multilevel Semantic Interaction Alignment for Video-Text Cross-Modal Retrieval”为题发表在视频领域国际顶级期刊IEEE Transactions on Circuits and Systems for Video Technology (SCI中科院一区TOP，IF: 8.4)上，宁夏大学为第一作者单位，西南财经大学尹诗白副教授为共同通讯作者。该成果受到国家自然科学基金项目、宁夏科技领军人才培养项目以及宁夏大学研究生创新项目的资助。
点击即可跳转原文
![]()
信息工程学院积极参与“翱翔之翼”大学生科技志愿服务项目
![]()
信息工程学院开展“牢记嘱托 感恩奋进”庆“七一”联合主题党日活动
![]()
中国共产党党内统计公报
![]()
宁夏大学信息工程学院
文字、图片 | 邓箴
排版 | 张羽
责任编辑 | 孙莉
~传递信工资讯 | 服务学院师生~
![]()
点个“赞”，再点个“在看”，“信”心满满![]()
