基于深度学习的服装检索与搭配的研究与应用

来源 :电子科技大学 | 被引量 : 1次 | 上传用户:cicihaicic
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着电商平台日益蓬勃发展,人们越来越习惯在线购买服装。为了更好地购物,人们希望电商平台能够提供服装的检索功能,并在自己购买服装的时候能够提供适宜的服装搭配建议。用户有着这样的需求而且网上有着海量的服装图片,在这个背景下各大电商都希望能够在服装的检索和搭配上给用户提供更好的服务从而增加自己的竞争力。服装的检索基于对图片特征更好地理解,服装的搭配基于对服装之间兼容性关系地更好地应用,本文利用深度学习探究了服装检索和搭配的这两个重要问题,本文的主要工作如下:将胶囊网络(CapsNet)进行改进作为本文的服装检索模型。原始胶囊网络的多角度理解物体能力较强,但是特征提取层只有一层卷积层,无法适用于复杂的现实数据集中。本文使用添加SE-Block的残差模块作为胶囊网络的特征提取模块,增强了它的特征提取能力使其能够适用于服装图片领域。不同于大多数服装检索模型使用三元组损失(Triplet Loss)来训练,本文使用边界挖掘损失(Margin Sample Mining Loss,MSML)作为度量学习的损失函数来训练优化模型。在Deepfashion数据集上进行实验,发现本文的模型不仅参数个数少,并且与基于卷积网络的服装检索模型相比,查全率上也有所提高。将图卷积自编码(Graph AutoEncoder,GAE)模型用于服装搭配。将服装当作图中的一个节点,两个服装能够搭配就是两个服装节点之间有着边存在,因此图中就包含了所有服装搭配的信息。使用图卷积网络(Graph Convolutional Network,GCN)作为编码器学习服装相互之间的搭配关系。因为人们日常挑选不同类型的衣服看重的属性不同,在此常识下提出一种可以感知到服装类型的解码器(Type-aware Decoder)。在Polyvore服装搭配数据集上进行实验,发现在扩充的FITB(Fill-InThe-Blank)任务中,各个选项数目下本文的模型都取得了最优的效果,当选项个数为4时,预测准确率能达到0.93。在预测搭配是否合理的二分类任务中,AUC值可以达到0.99,与其他模型相比结果也是最优。最后指出了对于本文所提出服装检索模型和服装搭配模型的未来改进方向。对于本文的服装检索模型,可以从使用更先进的度量学习方式、在网络中实现注意力机制等角度来改善模型。对于本文的服装搭配模型,可以从使用更多的服装文本属性信息、实现用户个性化的角度来对其进行优化。
其他文献
随着我国传媒市场竞争的日益激烈,电视新闻专题节目如何在这个激烈的竞争下立于不败之地是当前电视新闻界的一个重要话题。在新媒体环境下,要想更好地迎合受众的需求,电视新
<正>微博具有内容短小精悍、形式多样、信息碎片化、信息发布方便快捷等特性,极大改变了大学生的思维方式和生活方式,也无形中反映和影响着大学生的心理状况。一、"微博热"对
我国的政治发展将会更加注重政策的科学性、政策形成过程和程序的完善.合理的、包容的政策决定是一种最大限度地达到目标的正确行动,也是公共部门政策科学化的重要方式之一.
本研究主要研究吸烟是否对人体外周淋巴细胞姊妹染色单体互换(SCE)有影响,是否存在着剂量-效应关系。研究对象均为随机抽取成年男性。以39名非吸烟的船坞工人为对照组,每日吸
期刊
当前,我国发展不平衡不充分问题在乡村最为突出,行政村数量偏多、大小悬殊、布局分散、功能不全,基层社会发展受明显束缚,不同程度加大各级财政负担,造成资源浪费。为扎实推
本文介绍了刺五加茎叶的药理作用,通过实验证明,刺五加茎叶有与刺五加根相同的药理作用,与盐水对照组比较各项指标均有显著差异。
为最大限度减少工程建设造成的水土流失、改善生态环境、发挥水土保持工程效益,在分析长输管道工程水土流失特点的基础上,根据新《水土保持法》与水土保持相关技术规范的最新要
在美国外交领域里。关于国会与总统间权力纷争的诉讼不断,法院却不愿涉足,往往采用政治问题原则、成熟性原则等加以规避。其原因在于司法部门尊从政治机构的惯例、固守权力分立
今年是池田大作发表“中日邦交正常化倡言”四十周年。四十年前的1968年,池田大作在中日关系陷入困境的情况下从对中日关系的历史分析及人类和平思想出发,顶住沉重的压力,发表了
随着科技与生活的结合,新媒体顺应社会潮流而生。自从半个世纪前,它以独立全面的面貌出现在大众的视野中之后,就迅速吸引了大众的视线,并引领整个媒体改革的风潮。它的盛行给