基于图像相似度检索的商品识别系统研究

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:zgl_0251
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着国民生活水平的不断提高,城乡居民的线下购物需求持续攀升。与此同时,传统零售业的各种弊端逐渐凸显,人工收银结算效率低、用人成本高昂、消费高峰时段结算体验差等问题尤为突出。近年来,以无人超市为代表的“新零售”开始走进民众生活。无人超市的技术难点之一是自助结算系统中的商品识别技术。寻求一种快速准确的结算方式已成为无人超市亟待解决的问题。目前基于计算机视觉技术实现的商品识别系统主要存在以下问题:1)随着商品类别数目的增加基于深度学习模型的分类准确率出现明显退化;2)算法泛化能力较弱,缺乏在线特征学习机制,不能识别未经训练的样本;3)新添商品类别困难,需重新制作样本进行模型训练;4)特征检索效率低,延迟较高,实时性难以保证。针对以上问题,本文提出了基于图像相似度检索的商品识别算法。本文分别从特征提取网络结构设计与特征检索算法优化两个方面提高商品识别准确率与特征检索效率。其次设计并实现了面向无人超市自助结算的商品识别系统。本文主要研究内容和工作成果如下:(1)实现了基于YOLOX模型的二分类商品检测算法。通过重构RPC数据集结算图标签构建商品检测数据集,并采用图像亮度、对比度调节等数据预处理算法对输入数据进行增强。最后在该数据集上对商品检测算法进行训练与推断,模型检测准确率为99.77%,召回率为99.83%,mAP为99.86%,在GPU上的推理速度达到66.67FPS。(2)优化了基于图像相似度检索的商品分类算法,算法包括特征提取与相似度检索两个步骤。商品图像由特征提取网络映射成特征向量输出,相似度检索算法对特征向量进行余弦相似度计算与排序获得商品识别结果。商品分类算法采用轻量级网络MobileNet-V2的骨干作为特征提取网络,并在构建的商品识别数据集上进行训练。为改进算法的识别精度,在保证其轻量化的前提下将CBAM注意力机制模块嵌入MobileNet-V2网络的BottleNeck中,并加入多尺度特征融合结构,提升了特征提取网络捕获区分性特征的能力。在商品识别数据集上进行实验测试,改进后的MobileNet-V2+CBAM+多尺度特征融合模型识别准确率达到99.51%,相较原模型提升了 1.46%。(3)针对特征检索效率低,延迟较高等问题,本文利用乘积量化对暴力检索算法进行优化,优化后的基于乘积量化的相似度检索算法在含100万个维度为448的向量库上检索耗时2.1ms,为暴力检索算法的1/66。在商品识别数据集上进行分类实验测试,基于乘积量化的相似度检索算法检索耗时为暴力检索算法的5.8%,准确率为99.12%,相较于暴力检索算法准确率损失0.39%。为了进一步减小检索算法的精度损失,本文对基于乘积量化的相似度检索算法进一步优化。针对乘积量化中聚类操作采用的K-Means聚类算法存在聚类效果受初始聚类中心选取影响较大的问题,本文将K-Means聚类算法替换成性能更优的K-Means++算法。改进后的相似度检索算法分类准确率为99.35%,在保证检索耗时不变的前提下,对比基于乘积量化的相似度检索算法提高了 0.23%。(4)设计并实现了基于图像相似度检索的商品识别系统。通过在系统中加入可在线更新的商品特征库,从而能够在无需重新训练网络的前提下实现对新商品的识别。系统主要功能包括自助结算、商品管理、库存管理、已售商品信息统计等。
其他文献
目的 观察联合使用依折麦布和阿托伐他汀治疗老年冠心病合并高脂血症患者的效果。方法 60例老年冠心病合并高脂血症患者,随机分为观察组和对照组,各30例。对照组给予阿托伐他汀钙口服治疗,观察组在对照组基础上给予依折麦布口服治疗。比较两组患者治疗后血脂指标[总胆固醇(TC)、甘油三酯(TG)、低密度脂蛋白胆固醇(LDL-C)、高密度脂蛋白胆固醇(HDL-C)]以及临床疗效。结果 治疗后,观察组TC(4.
期刊
随着时代的发展和基础教育课程改革的全面推进,教育资源的内容和呈现形式不断发生变化,构建新时代、新形势下物理学习资源分类指标体系契合时代发展,具有现实意义。首先通过文献研究法梳理国内外对于物理学习资源的研究成果。发现国外学者的研究大部分集中于高等教育,对中学物理教育的研究较少,且中学物理教育方面的文章多集中于资源框架、电子资源、拓展性资源等对学生学习的影响。国内学者对物理学习资源的研究主要从综合角度
学位
当今物理学家们普遍认为夸克是组成物质的最小单元,夸克与夸克之间通过强相互作用组成强子。由于强相互作用的色禁闭效应,自然界中不存在自由的夸克。当系统处于极高温度极高能量密度的环境下,夸克将解禁闭成为自由的状态,并与胶子形成夸克-胶子等离子体(quark-gluon plasma,QGP)。通常认为宇宙大爆炸初期以及中子星内部存在QGP,因而研究QGP对探究宇宙早期演化有着重要的物理意义。实验上通过相
学位
目的:分析重症监护室(ICU)急性中毒患者伴院内感染的危险因素及其对策,以期减少或避免急性中毒患者伴院内感染的发生。方法:选取2015年9月1日—2017年9月3日间收治的急性中毒伴院内感染患者31例资料,分析ICU患者发生院内感染的主要危险因素,并提出针对性的控制对策。结果:31例急性中毒伴院内感染患者中,14例为呼吸道感染占45.16%,10例为泌尿道感染占32.26%,6例为消化道感染占19
期刊
物理问题解决能力是一个人运用已有知识经验和策略,主动地有效地处理物理问题的能力。培养高中生的物理问题解决能力是物理教育的重要目的,而力学是物理学的基础内容,也是高一年级物理课程的主要内容。因此,研究高一学生力学问题解决能力的影响因素,进而提出相应的提升策略显得尤为重要。本研究主要围绕高一学生力学问题解决能力的影响因素展开。首先,采用文献分析法搜集整理了国内外学者关于物理问题解决的相关文献,并对相关
学位
量子色动力学预言在极端高温高密状态下,夸克会解禁闭为自由状态,与胶子结合构成夸克-胶子等离子体(QGP)。寻找QGP形成的特征信号并研究其相关特性对理解宇宙早起形成及演化具有重要意义。作为LHC上四大实验之一的大型重离子对撞实验(ALICE),各子探测器优良性能和超高精度提供了高效的手段获取末态粒子信息,有助于分析判断QGP的形成并研究其性质。目前,实验上表征QGP存在的特性信号主要有:喷注淬火、
学位
量子色动力学预言:当系统的温度和能量密度足够高时夸克胶子可以由禁闭状态过渡到解禁闭状态,形成夸克-胶子等离子体(QGP)。在实验室条件下,利用高能重离子对撞,提供高温高能量密度环境,可重现夸克胶子解禁闭状态,进而探究QGP的性质。大型强子对撞机(LHC)中大型重离子对撞实验(ALICE)致力于重离子碰撞的研究,通过探针与QGP之间的相互作用探究QGP的性质。重味夸克被认为是研究QGP的优良探针。它
学位
教学技能是教师最重要的职业技能之一,也是衡量教师教育教学能力的重要指标。随着新课改不断深化,提升教师教学技能,打造高水平教师队伍,是当前教师教育发展的重要方向。同时近几年,教育信息化不断发展,各种现代信息技术运用到教育教学研究中,这也为教师教学技能的培养提供了更广阔的思路。本研究基于相关理论和实践基础,结合物理教学技能特点,尝试将视频分析工具和教学技能培养、评价相结合,构建基于视频分析工具的教学技
学位
锂离子电池广泛应用于我们的生活中,如电动汽车和各种便携式电子设备。传统的锂离子电池使用的有机电解液在高温下易燃烧,造成一定的安全隐患,另外,液态电解液和锂金属之间严重的副反应,阻碍了其商业化应用,进而限制了电池的能量密度,固态电解质的应用有望解决上述问题。自2007年报道以来,石榴石固态电解质由于其较高的离子电导率、较宽的电化学窗口、不与锂金属发生反应以及环境友好等特点获得了广泛的关注。然而,石榴
学位
钙钛矿太阳能电池作为第三代新型太阳能电池,自2009年问世,发展至今,光电转化效率已经攀升至25.7%。但是,由于在实际制备过程中,钙钛矿薄膜中缺陷的存在,会导致严重的电荷复合和界面复合,这极大的限制了器件的光电性能提升。同时,具有吸湿性的空穴传输材料和贵金属电极的使用也严重阻碍了钙钛矿太阳能电池向商业化发展的进程。为此,本工作从碳基无空穴传输层介孔体系碘铅甲胺(MAPbI3)钙钛矿太阳能电池出发
学位