大数据时代下爬虫技术应用与研究——以标讯快车项目为例

来源 :科技创新与应用 | 被引量 : 0次 | 上传用户:yuyan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网快速发展和大数据时代的来临,Web数据逐渐庞大,如何有效并快速地从互联网上获取到用户自身需要的信息是亟需解决的问题,网络爬虫技术应运而生,它是搜索引擎抓取系统的重要组成部分。文章是以标讯快车项目为研究目标,依托本学院在大数据方面的研究优势,结合该院IT特色,具有较强的实际意义和社会意义。
其他文献
加筋挡土墙是一种在地震灾害下受影响较小的挡土墙形式,相较于重力式挡土墙,其在地震载荷的破坏下呈现出良好的抗震性能。加筋挡土墙现今已经在工程领域中得到了广泛的应用,
以电解生产技术参数为设定条件,利用有限元ANSYS为平台,建立200kA电解槽三维电热场模型,对其进行模拟分析,其结果显示电解槽在生产中存在炉帮厚、伸腿长及内热不足等问题,这与生产
介绍了电解槽的节能原理与新型导气式阳极,分析了传统阳极与新型导气式阳极的优缺点。通过电解槽上应用实践对比,证明了新型导气式阳极有利于阳极气体的排出,能有效降低阳极
本文结合某铝业公司和中南大学联合开发的低电压节能技术,探讨了铝电解节能的途径,介绍了铝电解节能生产的经验和效果。