-
题名指称表达的研究进展与发展趋势
- 1
-
-
作者
牛凯
孙梦阳
索伟
王鹏
-
机构
西北工业大学计算机学院
西北工业大学网络空间安全学院
-
出处
《中国基础科学》
2022年第3期10-17,共8页
-
基金
模式识别国家重点实验室开放课题(202100028)
中央高校基本科研业务费(D5000210733)
-
文摘
指称表达是近年来蓬勃发展的新兴研究方向,也是视觉—语言交互领域中具有代表性的研究任务。其主要研究内容为:在对自然语言及视觉图像中的属性、位置、关系等上下文信息充分理解的基础上,通过跨模态的交互及推理,依据自然语言描述,准确完成图像区域的指称决策。该任务的有效解决对计算机的感知能力、推理能力和多模态信息融合能力等均提出了更高的要求,具有重要的研究价值;同时在人机交互、自动驾驶、智能家居等众多现实情景中均具备广阔的应用前景。本文旨在对近年来指称表达任务的研究进展及未来趋势进行综述和分析。介绍该任务的研究背景及研究内容,列举常用的数据集和评价指标,重点对国内外近几年的研究进展进行归纳与总结,分析国内该领域的研究现状及特点,对其未来的发展方向进行讨论与展望。
-
关键词
视觉—语言交互
指称表达
跨模态对齐
关系推理
-
Keywords
vision-language interaction
referring expression
cross-modal alignments
relation modeling
-
分类号
TP391.4
[自动化与计算机技术—计算机应用技术]
-
