网络蜘蛛的设计与实现

来源 :现代计算机:下半月版 | 被引量 : 0次 | 上传用户:wenzl1999
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从网络蜘蛛的介绍出发,阐述网络蜘蛛的搜索策略以及相关算法,并介绍网络蜘蛛MySipder的具体设计与实现.包括网页解析、重复链接分析、DNS解析、网络通信等内容。该系统经实际运行,效果良好,给出有待进一步改进的地方。
其他文献
构建我国专业市场竞争力指标体系,基于ANP-Fuzzy模型进行评价度量。结果表明,在专业市场竞争力中占首要地位的是政府政策,其次是市场管理制度,市场占有率,市场口碑信誉及服务
移动Agent技术将人工智能和网络技术结合起来,它的智能性、动态性和移动性特点为电子商务的智能资源发现和网上自动交易提供了技术支持。介绍移动Agent技术的基本原理,讨论移动
近年来,受劳动力市场的高流动性和培训成本等因素的影响,制造业企业培训激励严重缺失,培训激励不足又制约了产业工人素质的提升,这将使经济陷入产业低技能的陷阱。要使制造业企业
历史课程作为一门基础的人文学科,其在肩负着传授学生知识的同时,还要发展学生多种能力,培养学生的爱国主义精神和高尚的情操。因此说,高中历史教师要改变传统的教学模式,运用信息
从事件分布的地理学视角出发,尝试将平面几何中的最小圆覆盖思想与空间聚类分析技术中的K-均值聚类法相融合,提出了基于最小圆覆盖的K-均值聚类法,利用海上突发事件的位置信
首先,构建了共有产权房最优赎回时机和最优租金定价模型,并基于可支付能力视角,设计了共有产权房的准入门槛模型。其次,运用实际案例,对构建的三个模型进行了应用研究。最后,
介绍随机选题的两种具体算法,利用这两种算法可以实现科学的选题。对两种算法在实际中的应用进行了分析,从具体的实例中比较两种算法的优点和不足之处,并对随机选题的发展方向
随着居民消费水平的提升和消费意识的更加成熟,环境友好型产品的市场越来越广阔,政府也制定了更加严格的环境保护标准并加大了环境监管的力度,但是一项政策的好坏不仅取决于社会
提出一种基于证据理论与直觉模糊TOPSIS相结合的群决策方法。运用结构熵权法确定评估指标权重,基于证据相对可信度修正专家权重,由证据关于焦元的识别一致性,修改证据合成规则以
该系统作为银行办公自动化系统的一部分,与已有的交易信息记录系统时接,处理上游每天产生的大量交易数据。解析特定的统一数据格式,按照数据中包含的商户号对数据进行拆分并分别