数据受限条件下的多模态处理技术综述

来源 :中国图象图形学报 | 被引量 : 0次 | 上传用户:wenshi_shen
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着多媒体技术的发展,可获取的媒体数据在种类和量级上大幅提升。受人类感知方式的启发,多种媒体数据互相融合处理,促进了人工智能在计算机视觉领域的研究发展,在遥感图像解译、生物医学和深度估计等方面有广泛的应用。尽管多模态数据在描述事物特征时具有明显优势,但仍面临着较大的挑战。1)受到不同成像设备和传感器的限制,难以收集到大规模、高质量的多模态数据集;2)多模态数据需要匹配成对用于研究,任一模态的缺失都会造成可用数据的减少;3)图像、视频数据在处理和标注上需要耗费较多的时间和人力成本,这些问题使得目前本领域的技术尚待攻关。本文立足于数据受限条件下的多模态学习方法,根据样本数量、标注信息和样本质量等不同的维度,将计算机视觉领域中的多模态数据受限方法分为小样本学习、缺乏强监督标注信息、主动学习、数据去噪和数据增强5个方向,详细阐述了各类方法的样本特点和模型方法的最新进展。并介绍了数据受限前提下的多模态学习方法使用的数据集及其应用方向(包括人体姿态估计、行人重识别等),对比分析了现有算法的优缺点以及未来的发展方向,对该领域的发展具有积极的意义。
其他文献
<正>内部控制主要是指不同的单位管理层为了更好地保护自身的经济资源、会计信息而采取的相关措施。内部控制制度的完善可以确保有关部门经济信息和会计信息的准确性,有效地协调各个市场主体之间的经济行为,控制其经济行动,内部控制系统通过各个单位之间的内部分工,形成一种相互制约、相关联系的关系,这就是内部控制机制的相关方法和措施,对这些程序不断地进行规范化和系统化的处理,让其形成一个较为完整的体系。事业单位要
期刊
传统民俗文化是中华民族独特的文化标识,也是开展幼儿游戏活动的有效素材。在进行幼儿园日常游戏活动时,教师可以灵活运用传统民俗文化素材,以丰富多样的游戏活动推动传统民俗文化的创新发展。为使传统民俗文化更好地发挥幼儿教育的价值,全面立体地培养幼儿的民族精神,文章从幼儿游戏活动类型、活动内容等方面入手,研究传统民俗文化在幼儿游戏活动中的运用策略,从而让优秀传统民俗文化在幼儿游戏活动中得到科学有效运用。
随着90后人群开始成为时尚皮具市场的消费主力,皮具消费呈现出时尚化、个性化与社交化的发展趋势。皮具消费需求与消费语境的变化促使皮具品牌更加注重在设计中体现品牌的社会责任感与可持续发展目标,动物伦理、创新性的替代材料、个性化定制等成为品牌设计考量的重要因素。皮具设计的时尚性与个性化仍是目前显著的趋势,随着众多新创独立设计师品牌的加入“,可负担奢侈”皮具市场的竞争尤为激烈。品牌在发展中倾向于为目标顾客
<正>全球制造业格局面临调整,缩短产品供应地到目的地供应链长度、加强产业供应链自主可控程度,成为世界各国关注的重点,也对我国市场和资源"两头在外"的制造业提出挑战。2010年以来,英国政府相继出台国家供应链发展战略、航空航天等产业供应链发展专项指引等系列政策,提升供应链服务水平,助力制造业振兴。本文通过解读英国供应链政策体系,期望为我国强化供应链自主可控水平、打造如航空航天等高端制造业等的全球竞争
期刊
西南联大的戏剧活动由“知”和“行”两个层面构成。联大演剧之“行”有鲜明的“运动”色彩,从联大戏剧研究社到联大剧艺社的剧目创作和演出显现着联大演剧运动中的联合内容。联大演剧的“知”体现在其教学与学术研究的空间里,赵诏熊、吴晓玲、罗常培等人将西洋戏剧、曲学拍曲引入课堂,用戏剧课的方法讲授专业课;郑婴将小剧场戏剧的理念引入联大演剧,为联大戏剧研究社和联大剧艺社的小剧场戏剧活动进行了理论准备;闻一多通过剧
目标跟踪是计算机视觉的一个重要研究方向,在诸多领域有着广泛的应用。主流的研究一般基于可见光图像,跟踪效果常常受光照、天气等环境因素的影响。异源图像能够提供更全面的信息,弥补单模态存在的缺陷。本文便基于红外可见光图像,利用这两个模态图像之间很好的互补特性,提高单目标跟踪算法在光照变化、弱光等场景下的跟踪效果。鉴于孪生网络在目标跟踪领域有较成功的应用,本文也基于孪生网络,采用基于检测来跟踪的思想设计红
城市污水是目前全球产生量最大的污水。不经处理的排放污水会导致地表水产生极大的环境风险,并对人类的健康产生威胁。为降低环境风险,大量研发污水处理新技术,特别是降低污水运行成本的技术应运而生。高效率厌氧反应器主要研制用于处理高浓度工业废水,而生活污水和城市污水的特点就是低浓度,且生活污水的温度经常比工业废水低,仅在个别城市污水才能达到理想温度。第一个采用紧凑/高效厌氧处理技术反应器处理生活污水的范例始
<正>教育活动主要是指教育者基于幼儿的兴趣以及发展水平创建的具有教育针对性的环境,其内容具有一定的繁杂性以及综合性,期间幼儿可以通过自主意识的发挥培养综合素质能力,同时也能在相互交往的过程中感知成功的乐趣。而将中华优秀传统文化融入教育活动中能够更好地引导幼儿在游戏中感知文化特色,
期刊