基于注意力机制的场景文本识别

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:wangxiaoxiao880523
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
文字是信息传递的主要工具,它广泛地存在于各个场景当中。因为正确地识别场景中的文字有助于理解场景中的信息,所以利用算法让机器正确地从图片中识别文字信息一直是学者们的重点研究课题。与文档文本识别任务不同,场景文本识别任务的主要挑战是复杂的场景环境导致文本图片的多样性,比如自然光照过强导致某些文字的关键部分反光,或者亮度过低导致文本轮廓不明显;又或者因为拍摄角度的问题,使得图片中的文本呈现出一定的形变,这会导致文本形状变得不规则;以上因素都会给文字识别任造成困难。近年来有很多的研究结果表明,基于深度学习的注意力机制算法在处理序列问题上具有多样性和灵活性,所以本文研究利用注意力机制来解决场景文本识别的问题算法。本文的研究工作和贡献点主要包括:1.本文改进了提取图像特征的编码网络,缓解了训练数据和测试数据在客观分布上的差异的影响,使得场景文本识别模型更有鲁棒性。2.针对不规则文本的识别问题,本文在经典的一维注意力机制的基础上做了改进,提出了两种基于二维注意力机制的场景文本识别方法。本文所设计的方法充分利用了当前正在被识别的字符的上下文信息生成二维特征注意力分布,此注意力分布定位了在二维特征图中对应字符的局部特征所在位置。这种获得二维注意力分布的方式不需要使用字符级别的标注信息,降低了训练的成本。3.为了更好地改进注意力机制,本文提出了基于交叉注意力机制的场景文本识别算法,将从二维特征中提取对应字符的过程分配至竖直方向和水平方向两个阶段进行,从而使得网络既有二维注意力机制的优势,又能灵活地改进其注意力网络的解码过程。实验结果显示,所提出的两种基于二维注意力机制的场景文本识别算法与传统的基于一维注意力机制的场景文本识别算法相比,在性能上有显著的提升。而基于交叉注意力机制的场景文本识别算法在引入了自然语言处理领域的注意力交互机制后,其识别效果也有明显的提升。
其他文献
整数流理论是被Tutte作为解决四色猜想的工具引入的。对于平面图,处处非零的k-流的存在性与k-面可染色是等价的。整数流的研究方向集中在Tutte提出的有关整数流的三大猜想上
直接肼燃料电池(DHFC)作为未来的清洁能源技术之一,因具有比能量高,使用便捷,污染低等优点而受到人们的广泛关注。催化剂作为直接肼燃料电池的重要组成部分,对其性能起着举足轻重的作用。但是,高昂的价格限制了它的发展。因此,开发低成本、高催化性能的催化剂迫在眉睫。非金属磷不仅具有丰富的价电子结构,而且可以影响金属元素的电子状态。近年来,在金属催化剂中加入非金属磷,不仅降低了催化剂的成本,而且能够使磷与
为了进一步解决破产企业的债务问题,充分发挥破产企业在破产重整中的主动性,债权人委员会应该在破产重整程序中起到约束破产管理人及保障债权人的作用。但是,债权人委员会制
前言:"中国古典诗词艺术歌曲"结合了我国古典文学中的诗歌与近现代以来的作曲技术,融合发展的、极具中国古典文化特色与艺术水准的歌曲体裁,在我国历经百年的曲折发展历程,至
网络技术的快速信息化在给人们带来便利和效率的同时,也产生了一些问题。这突出表现在企业资金的有限性和其对信息资源需求的无限性上面。云计算技术的出现与迅速发展正是对
《公羊》三世说,为《公羊》学“三科九旨”之“张三世”的理论阐发。该说,从《春秋》经传原文的“三世异辞”,经过西汉董仲舒的“三等说”,直到东汉何休有关拨乱反正的历史政治思想,方才形成。关于“张三世”,董、何将其置于“通三统”后,而刘逢禄却将其变置为首例,以条例治经之法,大张《公羊》三世说,对后世影响深远。本文即以刘氏《公羊》三世说为主题,专项、深入、全面地探讨其形成、内容及影响。文章由四部分构成。第
随着世界经济的复苏和被誉为工业第四次革命“工业4.0”带动下,全球工控行业有望在工业智能化浪潮中深度受益。工业领域产业升级和技术改造不断加强,传统制造向智能制造转变
元话语是一种常见的语言现象,无论是在日常交流中还是在课堂教学中都会使用到元话语。以往对元话语的研究主要集中在书面语篇上,研究的视角主要有:功能、认知、语用、修辞、
大环类化合物具有特殊的环腔结构,选择性分子识别能力和良好的热稳定性,并可按不同需要设计合成出环腔大小不同,取代基不同的各种主体化合物等优良性能,但是大环类化合物溶解性较差的特征制约了其在色谱领域的应用。聚硅氧烷具有良好的成膜性和分散能力,有助于解决大环分子存在的上述问题。本文主要对新型大环分子柱[5]芳烃和难溶的葫芦[7]脲分子作为毛细管气相色谱固定相的分离性能进行了研究。研究内容主要包括以下四部
当前国际话语权领域呈现“西强我弱”的基本格局,构建与中国综合国力相称的国际话语权成为中国对外政策的重要目标。同时随着冷战后科技快速发展,网络成为人们基本的生活、生