图像文字鲁棒识别与理解算法研究及系统实现

来源 :浙江大学 | 被引量 : 0次 | 上传用户:HHP110
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像文字识别与理解是计算机技术应用中备受关注的研究问题,在重/轻工业、交通、金融、保险、教育等行业中扮演着基础功能角色。近十年来,深度学习技术有力推动了图像文字与理解技术的快速发展。然而,现有的研究是非系统性的,在算法效能和应用赋能上均是不充分的。算法上,子领域技术联动性不足(例如图像文字感知与理解技术的研究割裂),造成算法上的次优问题;图像文字中的多模态信息发掘不充分,造成算法的抗干扰性不足;除此之外,已有工作对算法的可落地性重视不足,例如在提升性能时却带来了额外的标注成本或计算代价,对应用不友好。应用上,一方面对跨领域协同技术框架需求迫切,期望支持形成复杂解决方案,为行业赋能提供技术基础;另一方面,构建高效的图像文字业务赋能平台也尤为必要,能够促进产业智能化。考虑到以上问题,本文尝试从模型落地友好性、信息多模态化、技术端到端化的角度对图像文字识别与理解技术进行多方位探究;并构建子领域技术组件协同框架与业务生产平台,支持社区研究与产业赋能。具体地,在落地友好性上,以文字识别及其矫正预处理为基础进行研究,在不引入更大参数规模或标注代价的情况下进行算法创新,促使模型易落地;在端到端化上,对不同数据形态下的文字检测与识别进行端到端研究,实现了算法的全局最优,提升了模型的可维护性;在多模态建模上,对图像文档中蕴含的视觉信息、语义信息甚至版式信息进行多模态抽取与分析,提升了方法的抗干扰性。在所研究算法基础上,本文秉持技术创新、资源共享、产业带动的理念,构建图像文字识别与理解组件协同框架与业务生产平台,一方面作为研发套件支持单领域、跨领域研发推动社区研究,另一方面作为技术赋能平台支持多行业应用。本文所研究内容已被应用在智能交通、港口治理、产线治理、财务稽核及人工智能开放平台等业务场景,促进了产业智能化升级,实现了良好的社会经济价值。论文所涉及的数据、技术与平台资源均已开放共享。
其他文献
黄河文化是中华文明的重要组成部分,是中华民族的根与魂。将黄河文化与小学多学科深度融合,能够丰富教学资源,构建完整的黄河文化课程教学链条。同时,还能够激发学生的创造力、学习积极性与主动性,弘扬和传承黄河文化精神,发挥黄河文化的育人功能,坚定文化自信。文章以“黄河之水”“黄河之迹”“黄河之魂”三个主题构建了黄河文化与小学多学科深度融合研究课程,深入探究了黄河文化与小学多学科深度融合的策略,最后形成了以
期刊
深度学习在图像识别、语言建模、机器翻译等复杂任务中表现出非常大的优势。然而,手动设计神经网络的架构是一个耗时的过程,需要机器学习专家的知识。对于深度学习领域的初学者来说,很难手工设计给定任务最佳的神经架构。因此,越来越多的研究人员开始探索神经架构搜索(NAS)的方法。NAS算法已经能够在CIFAR-10、Image Net和Penn Treebank等数据集上自动生成合适的神经架构,并获得良好的效
学位
对虾养殖水体中氨氮、亚硝氮等无机氮含量过高,严重威胁对虾健康生长,且富营养的尾水直接排放也会影响周边水域环境。为解决对虾养殖氮负荷高的问题,保障对虾养殖成功,本研究从海水生态养殖池塘沉积物中筛选获得高效降解氨氮和亚硝氮的氮代谢功能菌4株,分析了菌株在不同单一氮源和混合氮源中的脱氮特性,选择综合除氮能力较强的菌株Z2(Salipiger profundu)和菌株B3(Glutamicibacter
学位
随着“双减”政策的提出,教育教学方式要进行新的改革和完善。小学阶段是学生成长和发展的一个重要时期,教师在落实“双减”政策的过程中,要注重提升学生的学习质量和教学效率。而信息技术的高度发达为小学语文课堂提供了新的教学方式,将信息技术融合到小学语文课堂上,可以为学生营造一个适合的教学情境,调动学生对语文学习的积极性,让学生能够找到适合自己的学习方法,减轻学生的学习和作业负担,从而落实“双减”政策,促进
期刊
合理的通风模式被认为是确保规模化猪场实现最佳生产性能的重要策略之一。传统规模化猪舍通风模式比较粗放,存在夏季猪只体感风速较小,冬季舍外冷空气进舍预热不够,舍内不同区域、不同时间温差较大和空气质量差等现象,导致猪只动物福利、健康水平和生产性能低下,饲养人员工作环境差,通风换气能耗较大等问题。论文针对以上规模化猪场因通风模式设计引发的常见问题,以改善猪舍气流组织分布及降低通风换气能耗为突破口,将地道式
学位
E公司是全球领先的直线运动技术解决方案和产品供应商,主要面向医疗设备、自动化生产线、非道路机械以及其他通用设备行业提供直线传动零组件。2020年5月份,E公司管理层制定了2021-2025发展战略,对公司未来5年的发展目标提出了更高的要求。在E公司拥有的众多直线运动产品中,滚柱丝杠具有较高的产品附加值,可以替代传统的液压传动以及普通滚珠丝杠传动方式,为中高端设备提供更加优异的产品表现。在国内市场,
学位
智慧警务平台推广应用是数字时代发展的必然趋势,也是国家科技兴警战略的重要内容。智慧警务平台执法应用有利于提高警务执法效率,精准打击犯罪分子;有助于规范警务执法、降低执法成本;有助于提升执法办案法律效果和社会效果。当前我国智慧警务平台执法应用相关制度规范缺失,警务执法标准不统一,存在警务伦理和数据侵权风险。为此,智慧警务平台执法应用宜确立“以人为本”智能科技法治原则,秉持“以人为中心,以平台为辅助”
期刊
高校海归青年教师是新时代高校教师队伍的重要力量。强化高校海归青年教师对主流意识形态的认同对推进高等教育高水平发展、巩固师德师风建设成效和引导学生健康成长有着重要的价值意蕴。现实中,高校海归青年教师有家国情怀,但对主流意识形态认同不深;有正确价值取向,但与社会现实价值张力较大;有个人价值标准,但对集体事务参与融入不足;等等。可通过强化思想教育、做实人文关怀和加强制度保障等途径不断提升高校海归青年教师
期刊
报纸
城市地铁建设在我国方兴未艾,截至2021年底,中国大陆有55个城市在建线路253条,其中出现了大量岩石地层,如青岛、重庆、大连等等,粗略估计此类地层建设规模超1300公里。而区间隧道在整个地铁土建工程投资中占比一般在60%以上,对工程造价影响较大。对于岩石地层,矿山法以其断面布置灵活,施工组织便捷等诸多优点,应用十分广泛。然而目前矿山法隧道设计和围岩响应的理论较为模糊,且缺乏科学的设计方法,致使工
学位