摘要:作为计算机视觉、多媒体、人工智能和自然语言处理等领域的交叉性研究课题，视觉场景描述的研究内容是自动生成一个或多个语句用于描述图像或视频中呈现的视觉场景信息.视觉场景中内容的丰富性和自然语言表达的多样性使得视觉场景描述成为一项充满挑战的任务，综述了现有视觉场景描述方法及其效果评价.首先，论述了视觉场景描述的定义、研究任务及方法分类，简要分析了视觉场景描述与多模态检索、跨模态学习、场景分类、视觉关系检测等相关技术的关系；然后分类讨论视觉场景描述的主要方法、模型及研究进展，归纳日渐增多的基准数据集；接下来，梳理客观评价视觉场景描述效果的主要指标和视觉场景描述技术面临的问题与挑战，最后讨论未来的应用前景.
Abstract:As a cross-domain research topic related to Computer Vision, Multimedia, Artificial Intelligence and Natural Language Processing, the task of visual scene description is to produce automatically one or more sentences to describe the content of visual scene from an image or a video snippet. The richness of the content in the visual scene and the diversity of the expression of natural language make visual scene description a challenging task. This paper gives a review about the generation methods and performance evaluation on the recently developed visual scene description methods. Specifically, the research object and main tasks of visual scene description are firstly defined; the relationships between visual scene description and multi-modal retrieval, cross-modal learning, scene classification, visual relationship detection and other related technologies are discussed sequentially. And then, main methods and research progress of visual scene description are summarized in three categories, while the increasing benchmark datasets are discussed. Besides, some widely-used evaluation metrics and the corresponding challenges on the visual scene description are discussed. Finally, some potential applications in future are suggested.
PDF全文下载地址:
http://jos.org.cn/jos/article/pdf/5665
删除或更新信息，请邮件至freekaoyan#163.com(#换成@)
视觉场景描述及其效果评价
本站小编 Free考研考试/2022-01-02
相关话题/视觉 技术 信息 指标 数据
领限时大额优惠券,享本站正版考研考试资料!
优惠券领取后72小时内有效，10万种最新考研考试考证类电子打印资料任你选。涵盖全国500余所院校考研专业课、200多种职业资格考试、1100多种经典教材，产品类型包含电子书、题库、全套资料以及视频，无论您是考研复习、考证刷题，还是考前冲刺等，不同类型的产品可满足您学习上的不同需求。 ...考试优惠券 本站小编 Free壹佰分学习网 2022-09-19分布式多数据流频繁伴随模式挖掘
摘要:多数据流频繁伴随模式是指一组对象较短时间内在同一个数据流上伴随出现，并在之后一段时间以同样方式出现在其他多个数据流上.现实生活中，城市交通监控系统中的伴随车辆发现、基于签到数据的伴随人群发现、基于社交网络数据中的高频伴随词组发现热点事件等应用都可以归结为多数据流频繁伴随模式发现问题.由于数据流 ...中科院软件研究所 本站小编 Free考研考试 2022-01-02性能非对称多核处理器下异构感知调度技术
摘要:为了满足应用程序的多样化需求，异构多核处理器出现并逐渐进入市场，其中的处理核心（core）具有不同的微架构或者指令集架构（ISA），为应用提供多样化特性支持，比如指令级并行（ILP）、内存级并行（MLP），这些核心协同工作满足整个计算系统的优化目标，比如高性能、低功耗或者良好的能效.然而，目前 ...中科院软件研究所 本站小编 Free考研考试 2022-01-02智能数据管理与分析技术专刊前言
摘要:数据管理与智能计算的深度融合已经成为大数据时代顺利前行的迫切需求.智能数据管理旨在“为数据增添智能”,是数据科学与技术的重要基石,更是大数据产业蓬勃发展的关键支撑.一方面,将新一代人工智能方法应用于先进数据管理技术,尝试探索和突破智能数据管理与分析的理论体系、技术方法及系统平台,已经成为数据管 ...中科院软件研究所 本站小编 Free考研考试 2022-01-02大规模RDF图数据上高效率分布式查询处理
摘要:知识图谱是智能数据的主要表现形式，随着知识图谱领域的不断发展，大量的智能图数据以资源描述框架（resourcedescriptionframework，简称RDF）形式发布出来.RDF图上的SPARQL查询语义对应于图同态，是一个NP-完全问题.因此，如何使用分布式方法在大规模RDF图上有效回 ...中科院软件研究所 本站小编 Free考研考试 2022-01-02基于角色发现的动态信息网络结构演化分析
摘要:动态信息网络是当前复杂网络领域中极具挑战的新问题之一，对其动态的演化过程进行研究，有助于分析网络结构、理解网络特性、发现网络中潜在的信息及演化规律，具有重要的理论意义与应用价值.基于网络结构本身量化表示的复杂性以及网络演化时序、复杂、多变的挑战，使用角色来量化动态网络的结构，并对模型进行分析， ...中科院软件研究所 本站小编 Free考研考试 2022-01-02基于时效规则的数据修复方法
摘要:数据时效性是影响数据质量的重要因素，可靠的数据时效性对数据检索的精确度、数据分析结论的可信性起到关键作用.数据时效不精确、数据过时等现象给大数据应用带来诸多问题，很大程度上影响着数据价值的发挥.对于缺失了时间戳或者时间不准确的数据，精确恢复其时间戳是困难的，但可以依据一定的规则对其时间先后顺序 ...中科院软件研究所 本站小编 Free考研考试 2022-01-02劣质数据上代价敏感决策树的建立
摘要:代价敏感决策树是以最小化误分类代价和测试代价为目标的一种决策树.目前，随着数据量急剧增长，劣质数据的出现也愈发频繁.在建立代价敏感决策树时，训练数据集中的劣质数据会对分裂属性的选择和决策树结点的划分造成一定的影响.因此在进行分类任务前，需要提前对数据进行劣质数据清洗.然而在实际应用中，由于数据 ...中科院软件研究所 本站小编 Free考研考试 2022-01-02基于网格耦合的数据流聚类
摘要:随着越来越多的应用程序产生数据流，数据流聚类分析的研究受到了广泛关注.基于网格的聚类通过将数据流映射到网格结构中形成数据概要，进而对概要进行聚类.这种方法通常具有较高的效率，但是每个网格独立处理，没有考虑网格之间的相互影响，因此聚类质量有待提高.在聚类过程中不再独立处理网格，而是考虑了网格之间 ...中科院软件研究所 本站小编 Free考研考试 2022-01-02差分隐私的数据流关键模式挖掘方法
摘要:频繁模式挖掘是数据挖掘的重要任务之一，在数据流上挖掘简洁的关键模式比频繁模式更有优势，因为关键模式既可以避免频繁模式里包含的冗余信息以减少内存存储空间，又可以高效无损地提取频繁模式.但是由于相邻时间戳的统计信息可以作为背景知识增强攻击者的推理能力，所以从包含个人信息的数据流中挖掘关键模式比静态 ...中科院软件研究所 本站小编 Free考研考试 2022-01-02分布式异构数据库数据同步工具
摘要:一般而言，读写分离技术可以解决当前大数据环境下的读写速度失配的部分问题，但是现有的读写分离技术主要是针对同构数据库的解决方案.由于存储结构的不一致，由行式存储数据库和列式存储数据库构成的异构分布式数据库系统相较于同构分布式数据库系统在数据同步的过程中就会面临格式转换、同步速度不匹配等诸多难题. ...中科院软件研究所 本站小编 Free考研考试 2022-01-02
