弱监督自然语言图像实例分割方法研究

来源 :西华大学 | 被引量 : 0次 | 上传用户:hudaxia110
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像语义分割任务因其广泛应用于自动驾驶、环境感知、人体解析等场景,成为了计算机视觉的热门研究方向之一,然而其只能分割出同类事物,无法将单个事物区分开来,图像实例分割任务则是针对该问题提出的有效解决方案。当前在一些人机交互应用场景中,出现了需要自然语言和图像数据共同作用完成的功能,例如人们给服务型机器人下达“open the door”命令后,机器人则结合语言信息和摄像头捕获的图像信息做出动作响应,由此产生了一项新颖的自然语言图像实例分割任务,该任务旨在根据输入的图像和描述语句输出与描述内容相符的分割结果。目前已提出的自然语言图像实例分割模型均采用强监督的训练方式,即利用像素级标注分割目标的数据集作为监督样本,然而构造此类数据集需要耗费大量人力和时间。针对训练数据集获取成本高的问题,本文从模型训练角度进行了弱监督方法的相关研究,其主要内容和创新点如下:(1)针对强监督模型采集训练数据成本高的问题,提出一种基于弱监督的自然语言图像实例分割模型,该模型仅需目标中心点和图像级标签即可完成训练,有效降低了训练数据的获取成本。(2)针对弱监督数据无法提供精确分割目标先验信息的问题,提出一种迭代训练网络模型,以弱监督数据作为初始监督样本,并将模型每轮训练结束后输出的结果用作下一轮训练时的监督,最终得到能够输出较为精细分割结果的自然语言图像实例分割模型。从实验结果上看,本文提出的弱监督自然语言图像实例分割模型的分割精度可比于已有的强监督方法,且在个别数据集上达到最高值,同时能有效降低训练数据的获取成本,使其在实际应用中更加方便快捷。
其他文献
研究了两段式可变气门升程技术的基本原理、应用现状,建立GT-Power发动机仿真模型进行性能模拟,分析大、小气门升程下发动机泵气损失、燃烧改善及其与EGR配合使用等对于发动
自我效能感和学习策略作为影响学生学业成绩的重要因素,受到广大研究者的关注。研究表明,自我效能感强的学生通常能更好的使用学习策略,从而提升学业成绩。受学生学习基础和教师教学水平等因素的影响,农村初中的英语教学长期处于落后状态,亟待改善。研究农村初中生的英语学习自我效能感和学习策略,对提高农村英语教学有积极的意义。团体辅导作为一种情境辅导模式,其积极的氛围可影响学生的学习态度与学习行为,激发个体潜能。
目的 制备一种硅油灌注的多聚甲醛硅氧烷仿生纳米银复合材料(iPDMS/AgNPs),通过3D打印技术设计出能够满足不同伤口需求的材料。方法 通过扫描电镜和能谱对制备的i PDMS/AgNPs
依托全球化和区域一体化,权力转移的进程不断加快,多中心的国际权力体系正在加速形成。在多中心体系下,权力转移进程呈现出权力扩散、权力分解、特定议题上权力分配的不对称
<正>9月12日一早,马来西亚独资的精燕(广西)燕窝有限公司(以下简称精燕公司)行政经理吴宛蓉便从深圳赶回南宁,处理好相关事务后直奔工厂所在地——中国—马来西亚钦州产业园
公园绿地作为城市绿地系统中重要的一部分,是城市中最主要的自然景观,承担着生态、游憩、文教和防灾等多方面的功能,在一定程度上影响着城市环境和居民的生活质量。同时,公园
旅游目的地发展已经进入形象驱动阶段,其影响对提升旅游目的地客源市场,以及旅游业健康成长至关重要。武汉市以其丰富的旅游资源与优越的地理条件,成为我国中部旅游中心城市,
聚焦儿童发展,从儿童的现实需要与未来需求出发,在支持儿童自由发展的教育理念下整合教育资源,进行课程规划、设计、实施与评价,在这一过程中促使学生能够自主、自信、自律、
目的观察利普刀治疗宫颈上皮内瘤变(CIN)的临床疗效。方法选择在我院妇科就诊诊断为CIN患者67例行利普刀手术,分析术前术后病理检查结果。结果手术顺利,无一例发生并发症,术后
太阳能无人机利用搭载的可见光相机、红外相机、合成孔径雷达等设备可方便快捷地执行侦察监视任务,然而多数太阳能无人机仅能在夏季实现持续飞行,难以在太阳辐射较弱的中高纬