基于EAST与ASTER的自然场景图像中文本检测与识别研究

来源 :武汉邮电科学研究院 | 被引量 : 2次 | 上传用户:sky11731
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
伴随着互联网时代的到来,自然场景图片的获取与存储越来越便捷,自然场景图片记录着人们的生活以及重要的信息。图片中的文字蕴含有丰富的语义信息,如何从自然场景图像中准确的提取出文字在视频检索、车牌识别、导航系统、工业生产自动化等领域具有重要的应用价值。不同于文档图像,自然场景图像的背景复杂、图片的清晰度差异大,文字区域的规则多样化使得传统的OCR技术无法应用到自然场景中的文字识别上。近年来基于深度学习的技术渗透到各个应用场景,本文结合现有流行的EAST文本检测算法和ASTER文本识别技术,对自然场景图片中文字的提取进行了研究。首先,针对感受野能力不足的问题,本文实现了一种改进的EAST文本检测模型,该模型利用深度残差网络抓取更深层的图像特征,特征融合前在输出步长为8和16的特征映射层后加入ASPP模块进行感受野的扩张,接着通过双线性上采样到合适尺寸与浅层的特征映射串联进行特征融合,最后通过卷积输出到输出层。在网络的训练上,本文修改了损失函数通过结合Focal Loss和Dice loss两大损失函数进行网络的训练。通过在实验数据上的检测证明该模型能很好地完成在自然场景下的文本检测功能。然后,针对经典ASTER模型训练难的问题,本文实现了一种改进的文本识别模型,该模型包括了整流网络和识别网络两大模块:整流网络保留了ASTER模型中基于STN结构对倾斜、弯曲文本的“纠正”功能;识别网络采用共享CNN和LSTM编码层,联合CTC和attention机制的解码层。实验结果表明,在不影响文本识别精确度的基础上,该网络可以降低模型的训练难度。
其他文献
背景:急性呼吸窘迫综合征(Acute respiratory distress syndrome,ARDS)是一种重症呼吸系统疾病,其病死率仍高达35-46%。目前,ARDS的治疗方法十分有限。对于ARDS病理机制和治
随着计算机视觉领域的迅速发展,越来越多的智能视频监控技术正应用到海洋观测领域,海上目标检测也逐渐成为一个研究热点。但是目前大多数海上目标检测方法使用海面的背景模型或纹理、灰度等图像信息对目标进行监测,无法较好地适应复杂的海面环境。本文围绕如何在复杂多变的海上环境中准确地检测海上目标这一研究主题,采用粗提取、细分割和后定位的三步思想,在粗提取阶段结合目标的显著性特征对海上目标检测方法进行了研究,具体
厚壳贻贝(Mytilus coruscus)主要分布于温带海域,包括我国东海、黄海、渤海,日本的北海道以及韩国济州岛等。在我国的浙江、福建东部沿海产量较大,是我国常见的水产经济物种
随着信息技术的发展,依靠信息技术,加快企业信息化建设,进一步提高办公质量和效率,是企业适应新形式发展的需要。实现企业办公自动化和智能化,在一定程度上反映了一个企业的现代化管理水平。当前大部分企业的办公形式主要建立在OA(Office Automation System)系统基础上,因此该系统的建设程度与企业的办事效率及企业管理水平高度相关。而在企业发展过程中,通过OA进行日常办公与工程建设,使各业
本文立足于创业团队视角,以创业团队成员作为主要研究对象,研究创业认同、创业团队领导行为、团队沟通和心理契约等变量的联系,提出团队成员心理契约影响体系。一方面,研究将创业认同和创业团队领导行为作为自变量,心理契约作为因变量,探究两者相互间的关系;另一方面,将团队沟通作为中介变量,检验团队沟通的中介作用。本文的研究方法主要有内容分析法、问卷调查法和结构方程分析法。首先通过对文献进行整理分析,然后设计相
近几年来,随着科技的快速进步,人们对柔性储能器件的需求不断增长,而电极材料是影响各类储能器件的性能的关键因素。其中,碳材料和钴-镍基金属氢氧化物材料资源丰富、成本低
高速公路作为交通运输中的领头羊,担负着国家战略意义,其在促进经济发展的作用上发挥了举足轻重的作用。尤其是在我国改革开放后,经济迅猛发展,高速公路的建设也突飞猛进,在
本文主要讨论如下关于齐次Dirichlet边界条件的问题:(?)其中a,b是正常数,Ω是Rn中边界光滑的有界区域,m(·),p(·),r(·)是Ω上的可测函数,满足2≤min{m-,r-}≤max{m+,r+}
研究目的:本研究基于国医大师夏桂成的“七、五、三”奇数律理论,对早期先兆流产患者在孕期的关键时点临床症候、血清P、β-HCG、E2的变化及B超适时的进行动态监测,在以往运
随着人们对能源的需求日益增大以及传统化石能源燃烧带来的环境污染问题,寻找和开发高性能的电化学储能设备以高效利用新能源迫在眉睫。锂离子电容器因同时具有超级电容器高