结合残差学习和双模态CAE的图像描述方法

来源 :光学技术 | 被引量 : 4次 | 上传用户:yangxiaoxi21
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对传统图像描述方法存在提取图像关键信息精度不高、描述不准确等问题,提出了一种结合残差学习和双模态CAE的图像描述方法。提出一种新型双模态卷积自动编码器(CAE)结构,包括图像和文本两个输入,以及编码、隐藏层交互、解码等处理环节,完成对输入图像的文本描述;在经典CAE中加入残差学习,与CAE的卷积层构成深度残差网络(DRN),增加了学习深度,以提高方法的准确率;将文本和图像的隐藏层进行交叉重构,以最小化损失函数为目的,训练得到图像-文本的关系,从而实现图像的描述。利用COCO和Flickr30k数据
其他文献
中国杂技是中国农业文化的产物,具有浓郁的民族风格和特色,也是一个具有悠久的历史的产业。但是随着我国社会经济的突飞猛进,人们的艺术需求以及对艺术的鉴赏能力都不断提升,杂技
备考指导rn咏物诗是以客观具体的事物为描写对象的一类诗歌.在我国古代诗歌中,咏物诗蔚为大观.《诗经》中的《桃夭》《硕鼠》等可谓咏物诗之祖.到唐代,咏物诗的创作达到顶峰,
期刊
采用光学显微镜、扫描电镜、透射电镜对新型9wt%Cr耐热铸钢热处理过程中的微观组织进行了观察,揭示了不同回火工艺下钢中第二相的析出规律。利用高分辨透射电子显微分析(HREM
硫代砷酸盐作为富硫地下水中砷的重要赋存形态,在其迁移转化过程中起着十分重要的作用,但现有硫代砷酸盐的标准合成方法流程复杂、操作繁琐,限制了对地下水中硫代砷酸盐赋存
戏剧表演中角色的创作必须是在一定的情境中进行的,演员在进行角色塑造的同时,必须了解规定情境在人物形象的创作中的重要性。本文首先对规定情境在戏剧表演中的作用和价值进行
聚对苯二甲酰癸二胺(PA10T)是我国自主开发的一种新型生物基耐高温尼龙,具有优异的力学性能、耐热性、耐磨性、尺寸稳定性、耐化学腐蚀性、抗水解性和良好的加工性能,且吸水
中心波长为1064nm的激光光束,经准直扩束光学系统后,其光强仍呈类高斯分布.为了对其进行整形匀化研究,根据光阑法与激光光强分布曲线设计一种渐变衰减片,衰减片结构由若干遮
1 Introduction The North China Craton(NCC)has experienced lithospheric destruction in Mesozoic accompanied with crustal exhumation.Fission track or(U-Th)/He dat
水合物沉积物力学特性研究是天然气水合物开采领域中的热点问题。为深入了解水合物对沉积物力学特性的影响,在提出一个新的水合物沉积物离散元数值试样制备方法的基础上,模拟
目的:研究苗药铁筷子挥发油成分及挥发油抗肿瘤作用.方法:采用水蒸气蒸馏法提取铁筷子挥发油,利用GC-MS联用仪分析铁筷子挥发油的化学成分.CCK8法检测苗药铁筷子挥发油对BGC-