基于商品标题的多平台联合分类问题研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:knightxmu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
电子商务平台为商家和客户提供了便捷的交易方式,商家独立经营商品和选择分类标签,用户按照商品分类或是关键字查询商品。复杂的商品种类和快速变化的商品信息不仅给用户选择带来麻烦,也给监管部门统计分析和第三方平台提供统一查询服务带来困难,因此需要面向多平台进行统一商品分类。考虑到电商平台上商品数量巨大,且商品信息包含大量图片和文字描述,基于商品标题进行多平台联合分类是现实应用的关键问题。主要困难包括:由于商品标题包含了复杂的专有名词、不断涌现的技术词汇和性能指标、带有强烈个体感受的商品特点描绘等不规范词汇,无法用传统的词向量技术进行语义分析,也无法对这些词语堆砌而成的短文本进行句子层面的语法分析;而且,商家自行标注商品分类,不仅相同商品在同一平台有不同标注,而且不同平台的分类标准也不一致,增加了标签的混乱度,对分类模型的学习带来困难。为了解决基于商品标题的分类标注这些挑战,本文主要工作如下:首先,针对碎片化文本的语义表示问题,提出了基于主题模型的概率图谱特征抽取方法。根据商品标题中的词汇出现频率和联合出现情况,学习不同类型词汇在隐式主题空间上的概率表示;通过主题和词汇空间的联合概率采样得到商品的语义表示。考虑到主题模型的概率生成特点,多次采样得到文本的概率图谱特征,这种混合采样结果,能够反映商品在多隐式主题上的关联性,还能通过词汇的共现情况,动态学习新词在隐式主题空间上的概率分布,使得商品标题语义建模对于不断涌现的技术词汇更具包容性。其次,针对商品概率图谱表示,提出了基于深度学习的多分类模型,采用卷积神经网络和多层感知网络学习主题之间的深层语义关联关系,选择softmax作为输出层的激活函数;采用dropout机制防止过拟合现象,提高了模型的健壮性。针对商品分类标签的混乱情况,提出了层次化分类的标签语义约束关系,对于预测结果进行约束条件下的标签层次化传播,以满足分类标签的语义一致性,还能减少同类商品的标签差异性对模型学习的负面影响。针对多平台分类标准不一致问题,提出了基于映射关系的统一分类标注方法。选择同时出现在不同平台上的样本数据,独立计算其在各自平台上的分类标签的概率分布;分别采用线性和非线性映射模型学习不同分类目录之间的关联关系,给出统一分类标签建议;针对新的商品标题,分别预测其在不同平台分类目录上的标签信息,实现多平台商品联合分类。本文工作与浪潮集团有限公司合作,采用真实数据集进行实验,辅助国家统计局进行电商零售发展指数分析、经济趋势预测等任务。借助浪潮卓数大数据平台采集主流电商平台的商品数据,包括京东商城数据集、天猫商城数据集和亚马逊商城数据集等。通过不同层面的分析对比实验,验证了本文模型在解决差异分类标准和标注不准确问题上比其他方法更具优势;详细分析了不同参数设置以及模型的不同部分对性能的影响;最后,详细分析了分类标签的语义关联性,给出了目录分类的改进建议。
其他文献
近年来,数字贸易的蓬勃发展引起世界各大经济体的关注。数字贸易是新一代信息通信技术与产业的深层次融合的产物,其核心是借助数字技术加强了贸易双方的信息互联互通,便利了货物贸易的同时,使更大范围的服务贸易开展成为可能。数字贸易的基础是数字经济,它的出现也反向激励了数字经济的发展和产业结构的优化,是我国加速数字化转型,营造数字经济新优势,推动经济高质量发展的关键一环,也是对冲新冠疫情对我国经济的负面作用的
学位
随着全球经济一体化的不断推进,在世界贸易组织(WTO)主导下的全球多边贸易体系出现边缘化的趋势。为应对复杂的国际经济环境以及自身经济发展方式转变的要求,中国积极探索自由贸易试验区建设。自2013年中国(上海)自由贸易试验区开始,目前我国已设立21个自由贸易试验区,架构了“1+3+7+1+6+3”的基本格局,形成了横跨东西、纵联南北的开放态势。中国的自贸试验区是在中国全面开放改革中建立起开的,在国际
学位
番茄的受众极广,市场需求量非常大,营养价值也很丰富,而番茄酱则主要受到西方国家喜欢。随着经济不断发展以及社会不断进步,我国人民的饮食习惯也在逐渐改变,番茄酱的需求量越来越高,其贸易规模也大幅提升,番茄酱贸易量逐年递增。在此背景下,我国番茄酱产业经过数十年发展,已经取得了长足进步,但是依旧面临着品牌效应不明显,出口市场过于集中,深加工比重不足等诸多问题。与此同时,近年来贸易保护主义抬头,逆全球化喧嚣
学位
“十四五”时期是中国加速推进外贸高质量发展新的关键期,新一轮技术革命和产业升级速度加快,为中国经济“换道超车”带来契机。与此同时,国际形势发生重大变化,全球贸易格局面临重构,以及新冠疫情加剧了这些因素的不确定性,为中国经济带来了新的挑战。面对新时期的发展契机以及与此伴生的不确定性,我们要加快构建中国新的经济着力点,充分发挥装备制造产品对经济发展的推动作用。2020年在全球基础设施建设的总需求中,“
学位
随着数字技术与贸易融合发展,数字贸易逐渐兴起并成为当今对外贸易主要形式之一。疫情期间,全球数字贸易规模逆势上涨,展现出旺盛的生命力。数字贸易不仅是未来贸易发展的主要方向,也是疫情时期促进经济快速复苏的关键之一。新疆是丝绸之路经济带核心区,是我国接壤其他国家最多的自治区,也是陆上通往中亚、欧洲的必经之地,有着得天独厚的对外贸易地理优势,发展数字贸易对新疆对外贸易的高质量发展有巨大的推动作用。本文分析
学位
中国与周边国家的双边贸易是我国对外贸易的重要组成部分,是实现双循环新发展格局的重要一环。长期以来,我国一向重视与周边国家的贸易发展,“一带一路”倡议、人类命运共同体意识和双循环新发展格局的提出,均体现了推动我国与周边国家双边贸易共同发展的理念。近年来,在国家新发展格局的提出和RCEP签订实施的影响下,我国对周边国家的双边贸易稳定发展,区域经济一体化建设稳步前行。但是,在当前国际社会大国博弈日益激烈
学位
设计合成了1-(2-四氢呋喃基)亚甲基-3-(2-叔丁基苯基亚胺基)吲哚配体HL[1-(2-C4H7O)CH2-3-(2-tBu C6H4N=CH)C8H5N,并将配体HL与稀土金属三烃基化合物RE(CH2Si Me3)3(THF)2(RE=Gd,Dy,Y,Er,Yb,Lu)按摩尔比1:1反应,分离得到双核稀土金属单烃基配合物{[μ-η~2:η~1:η~1:η~1-1-(2-C4H7O)CH2-3
学位
随着社会的转型和教育影响的加大,人们的教育理念发生了显著的变化,已经不再固守“学校教育包揽一切”的思想,家校合作的观念被人们普遍接受,家长越来越多地参与到子女的教育中。其中,家长参与家庭作业是重要表现。目前,我国关于家长参与家庭作业的研究较少,相关研究呈现碎片化、经验化特点。家长参与家庭作业已经引起社会的普遍关注,如“家长作业”“家长批改作业”“家长签字”等,教育主管部门也多次对此做出回应。可见,
学位
报纸
改革开放以来,特别是自2000年提出“走出去”的国家发展战略后,我国对外工程承包得到了长足的发展,当前中国已成为世界工程承包大国。伴随着中国对外工程承包的快速发展,其面临的各类风险愈加复杂,尤其是叠加新冠疫情的影响,全球地缘政治、经济环境等因素变得更为复杂与敏感,使得中国对外工程承包面临巨大的风险。因此,研究中国对外工程承包的区位选择及其相关影响因素,这对中国对外工程承包的持续稳定发展具有重要的现
学位