论文部分内容阅读
基于Splash技术,对商品页面中的javascript代码进行预渲染,结合Scrapy爬虫框架,实现了一种快速、有效采集不同平台商品数据的系统。实验结果表明,该系统能有效采集不同平台的商品数据,具有一定的应用价值和推广性。
大规模电商平台商品信息采集系统的设计与实现
【摘 要】
：
基于Splash技术,对商品页面中的javascript代码进行预渲染,结合Scrapy爬虫框架,实现了一种快速、有效采集不同平台商品数据的系统。实验结果表明,该系统能有效采集不同平台的
【机 构】
：
延安大学数学与计算机科学学院
【出 处】
：
延安大学学报:自然科学版
【发表日期】
：
2020年2期
【基金项目】
：
国家自然科学基金资助项目(61866038),延安大学研究生教育创新计划项目(YCX201902)
其他文献
通过建立媒体介入的信息不对称医患纠纷博弈模型,得出媒体介入对医患纠纷博弈的影响。首先建立信息不对称医患纠纷博弈模型,研究其演化稳定策略,然后分别在网络媒体的正面引
[摘要] 电子商务的飞速发展，促进了物流的快速发展，物流服务水平的高低已经成为影响电商企业成败的重要因素，目前电商企业的物流模式主要有选择自建或第三方物流模式，以及正在发展的平台整合物流模式和即时配送物流模式。京东商城在与其商家的合作过程中，也出现了四种不同的配送模式，这些配送模式各有利弊，电商企业也会在其发展过程中不断匹配合适的物流配送模式。 [关键词]电商企业;物流模式;京东商城 [DOI
为了解中小学、幼儿园教师职业倦怠的现状,探讨主观幸福感和人生意义在职业倦怠对心理生活质量影响的中介作用机制,采用"中小学教师职业倦怠问卷""心理生活质量评价问卷""主
本研究通过对收集的科学发明创造实例进行整理,测量,访谈,再测量,建立拥有多项指标的创造性科学问题提出材料库,以期为研究创造性科学问题提出提供有效的测试工具。在材料库
集装箱多式联运外部成本是运输政策制定的重要参数,但目前深入研究缺乏,实证研究更少.文章从分析多式联运外部成本入手,给出了多式联运外部成本结构和计算模型,并使用该模型
针对访存相对密集的应用,提出了一种基于访存模式高效率数据访问技术。该技术结合应用程序的访存特性和GPU的片上高速共享存储器特性减少应用程序对高延迟片外存储访问的次数
依据《民用建筑可靠性鉴定标准》要求,既有建筑改造或增容、改建或扩建前应进行可靠性鉴定。本文以某综合楼拟在天面加装消防、生活水池及空调机组为实例,对该房屋进行资料调
近年来,随着我国美丽乡村建设的不断发展,国家在乡镇的发展上给予了各种支持,不少财政资金及专项补贴越来越多。面对大量的资金,乡镇政府如何将其用在刀刃上,提高资金使用效