基于网络爬虫的网页信息获取技术

来源 :通讯世界 | 被引量 : 0次 | 上传用户:gmwang2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,网络中的信息量飞速增长,这为人们精确地搜集数据增加了困难。网络爬虫的出现很好地解决了这一问题,它可以按照一定的规则自动获取网络中的信息,并通过解析这些信息抽取有价值的数据。本文详细阐述了基于网络爬虫的网页信息获取技术,首先简要介绍了网络爬虫技术的研究背景,在此基础上,详细分析了网络爬虫技术的原理及组织架构。基于这一理论体系,本文实现了定向获取信息的网络爬虫,使数据的精确获取成为了可能。
其他文献
多面体低聚倍半硅氧烷(Polyhedral Oligomeric Silsesquioxane,POSS)是一类具有有机-无机杂化结构的笼形分子,其结构可以用通式(RSiO1.5)n,(n=6、8、10或更大的偶数,R是有机基团
近年来,内蒙古农业信息化发展迅速,并建立了各类信息资源系统以及网络系统,许多已陆续投入使用。如何充分利用现有已经建成的系统,整合各种农业信息资源,使其纳入统一的农业
随着经济全球化、信息化步伐的加快和产品生命周期的缩短等经济环境的剧烈变化,企业面对更加激烈的市场竞争环境,利润空间也逐渐萎缩,企业举步维艰。在这种环境下企业如何把
21世纪以来,随着经济的全球化、知识经济时代和后工业时代的到来,市场更加成熟、竞争更加激烈。如何提高企业核心竞争力,全面提高公司业绩,已经成为越来越多的国内外企业研究
目前,大庆油田已经进入特高含水期,为了继续保持油田稳产,对注水工艺技术提出了更高的要求。现在采用的注水技术主要有常规偏心注水技术、桥式偏心分层注水技术、同心集成细
90年代以来,媒体逐渐走向市场,电视的功能发生了转变。大众文化处于流行的地位,而电视剧与生俱来的大众化和通俗化,必然成为了大众文化最大的共谋者。在娱乐文化大行其道的影
本文根据勐乃河水电站计算机监控系统的基本控制需求,结合电站主控层级(中控室上位机)单元的控制要求,重点介绍如何以i FIX监控软件为设计平台,对勐乃河水电站监控系统电站主控
以华能沾化发电厂目前现有的各类型的热工交流电源冗余切换装置为对象,研究供电可靠性问题,测试目前热工系统供电可靠性指标,对照现有国家标准,分析影响可靠性的因素,并对所
作为资深的文学批评大师及颇有建树的比较文学专家雷纳·韦勒克,他的研究在一定程度上实现了批评理论与比较文学间的水乳交融与相得益彰.他立足于比较文学的学科视域,对
北宋时期大思想家周敦颐是濂溪文化的创立者和代表人物.后人尊称为濂溪先生。作为中国传统文化重要组成部分的濂溪文化中包含有丰富的廉洁从政的理念.认真加以发掘和研究,对于加