基于混合特征的网页包装器生成及自适应技术

来源 :郭莹楠 | 被引量 : 0次 | 上传用户:lsj111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网是一个巨大的资源库,目前的网页数量已达千亿级,这个数量在未来还将持续增长。大数据时代的来临,使得各类信息呈现指数级增长的趋势,网页作为互联网存放数据的重要载体,包含了大量的信息。为了提取其中我们所需的有效信息,人们提出了各种各样的Web数据提取技术。Web数据提取与普通文本提取的不同主要体现在网页自身存在一定的结构。Web数据提取是将网页上半结构化的数据按照一定的规则提取出来并以特定格式保存,最后返回给用户,其主要的实现方式是网页包装器。然而,该技术还存在一些问题——由于包装器的内在特性和它们执行的提取任务的复杂性,它们通常和其所处理的Web页面的结构严格相关,有的时候对Web页面结构的轻微改动也可能导致提取任务的失败。为了降低包装器的维护成本,我们希望包装器一旦被正确地开发后,可以正常工作很长一段时间。因此,本文提出了一种基于混合特征的网页包装器生成及自适应技术。具体的工作内容如下:(1)本文提出了一种基于混合特征的网页包装器生成技术。本文将网页应用的页面源码分析作为突破口,设计特征提取算法,实现基于页面渲染提取网页的视觉特征,以及提取网页标签的属性特征、结构特征。然后进行目标数据提取区域的定位以及目标数据项的定位,最后生成包装器配置文件,将该目标区域的所有信息以特定格式封装生成网页包装器。(2)本文提出了一种基于相似度计算的网页包装器自适应技术。该方法首先获取当前网页的特征集合以及原包装器中的信息,计算其结构相似度判断网页结构是否发生变化,若网页结构变化则进行包装器目标区域及目标数据项的重定位,从而得到新旧版本网页目标区域的匹配及目标区域内数据项的对应关系。最后,根据得到的前后版本关联关系,对原网页包装器进行自适应调整。为了验证本文方法的可行性和有效性,在真实的网页应用上对本文的方法进行评估。实验结果显示,本文的方法能够有效的生成网页包装器,其生成的包装器平均精确度和召回率可达到95%和97%,并在网页更新后能够达到87%的自适应成功率。
其他文献
在汽车产业不断发展与产业技术持续进步的过程中,整车企业和零部件企业由于获取外部规模经济的需要而不断集聚在一个地区,形成产业集聚区及核心城市。规模经济所产生的产业横向影响力会拉动区域零部件产业的发展,提高对整车产业的配套服务能力;集聚程度高会降低生产成本和物流运输成本,带动汽车产业上下游相关产业如汽车服务行业和原材料产业等的发展与进步。因此,对汽车产业集聚区和核心城市汽车产业横向影响力深入研究,为政
学位
利用朴素贝叶斯相关模型对电子商务企业信用风险数据进行分类预测,提出交易主体在防范电子商务企业信用风险过程中的合理化对策,促进电子商务的健康发展。旨在对电子商务企业的信用风险加强分类指导,提高信用风险分析的可靠性。由于电子商务企业信用风险数据的连续性和冗余性,本文首先利用基于核主成分分析的高斯朴素贝叶斯分类模型,对不同的电子商务企业信用风险数据进行分类预测。通过分析基于核主成分分析的高斯朴素贝叶斯模
学位
无人机蜂群作战已经成为军事领域的热点,世界各军事强国对其关注度日益增加。为了深化对无人机蜂群作战的理解与认识,首先简要介绍了概念起源,然后重点对作战样式、作战优势等进行了分析,最后以无人机蜂群作战的军事应用为牵引,总结了无人机蜂群作战深入发展需要攻克的关键技术难题。
期刊
20世纪初期,在今内蒙古自治区西北的额济纳旗古黑水城遗址出土了一批震惊中外的文献,这些文献年代跨越大,文字类型丰富,数量惊人。其中,汉文类和西夏文类的涉医药文献所记载的药物名词数量可观,通过前人学者的研究,现阶段已经解读出了很大一部分的药物名称,但还有诸多存疑和考证有误的药名存在,这在一定程度上影响了西夏方药研究和现代临床转化运用。虽然目前所公布的黑水城文献中尚未见有独立的本草学文献著作,但是通过
学位
股权分置改革,致使国内股票市场逐步迈向全流通阶段。股票可以自由流通,为上市公司控股股东提供了新的获利途径。由于交易市场存在信息不对称附加相关法律法规不完善等特点,致使控股股东在提前知晓公司内部情况下,择机抛售大量股票以套取巨额收益。而其减持行为,往往向市场传递上市公司经营状况不佳、未来发展堪忧等消极信号,造成中小股民恐慌纷纷抛售所持股票,最后引发上市公司股价剧烈波动,大幅度下跌,扰乱证券市场秩序。
学位
目的:通过超声辅助水蒸气蒸馏法优化竹叶椒挥发油提取工艺,对本实验提取的竹叶椒鲜果挥发油进行体内镇痛抗炎药效试验,并通过网络药理学方法及体外实验探讨其镇痛抗炎作用机制。方法:采用响应面法,以挥发油提取率为评价指标,考察超声时间、料液比、蒸馏时间三个因素最佳水平,确定竹叶椒挥发油的最佳提取工艺;采用气相色谱-质谱联用仪(GC-MS),分析鉴定竹叶花椒挥发油中化学成分;用热板法和醋酸扭体法研究竹叶椒挥发
学位
随着净零能耗建筑的逐渐推广,利用其较低的冷热负荷和较高的蓄热特性的特点,本文提出一种新型的户式太阳能-污水源热泵系统,探究将本热泵系统与净零能耗建筑相结合实现通过建筑本体储能和清洁能源利用保证全年生活热水及冬季供暖的可行性。本课题从系统性能、运行效果、可再生资源利用率等角度分析不同系统参数对系统的影响规律以及系统在不同气候区全年连续运行的运行效果,从而探究本系统应用在净零能耗建筑中的适用性。首先,
学位
学位
在全球化经济的浪潮下,各国出现了大量跨国并购案。随着我国经济和世界经济的联系日益紧密,我国许多企业也加入到跨国并购的行列中来。同时,现阶段我国政府出台了许多政策和优惠措施来号召和帮助企业“走出去”,为企业实现跨国并购提供了一个良好的外部环境。但是由于我国跨国并购仍处于发展初期,分析和防范财务风险的经验不足,因此对跨国并购财务风险控制研究十分有必要。本文采用文献综述与案例分析相结合的方法,从企业跨国
学位
学位