【摘 要】
：
本文针对单机网络爬虫获取Web空间数据在抓取覆盖率和抓取效率上均受到一定程度的限制,难以保证所抓取数据的及时性以及全面性问题,研究了基于分布式网络爬虫的Web空间数据获
【机 构】
：
昆明理工大学国土资源工程学院,国家测绘地理信息局四川基础地理信息中心
【基金项目】
：
四川省科技支撑项目资助(J2015ZC05);数字制图与国土信息应用工程国家测绘地理信息局重点实验室开放基金项目资助(DM2014SC04)
论文部分内容阅读
本文针对单机网络爬虫获取Web空间数据在抓取覆盖率和抓取效率上均受到一定程度的限制,难以保证所抓取数据的及时性以及全面性问题,研究了基于分布式网络爬虫的Web空间数据获取方法,设计了基于分布式网络爬虫的Web空间数据获取原型系统并且最终实现,并且通过对原型系统进行相关的测试来证实了本文所提出解决方法的有效性。
其他文献
随着社会经济法律环境的发展,企业的销售与回款业务日趋复杂,国内外企业财务造假丑闻和审计失败的案例接连发生,而虚增收入、隐瞒当期收入等牵扯到销售与收款业务的舞弊案例
一、培养兴趣。让学生爱说话兴趣是最好的老师。它能调动学生学习的主动性和积极性，是学生学习的强大动力。心理学也告诉我们，“人在大脑皮层产生某些兴奋点或情绪起伏较大时，容
麻疹属乙类传染病，是由麻疹病毒引起的急性发疹性呼吸道传染病。其传染性极强，冬春季多发。临床特点为发热、流涕、眼结合膜炎、咳嗽、口腔黏膜斑及皮肤特殊的斑丘疹。
高校学生作为互联网使用的主力军,正处于自我价值体系建构的年龄阶段,其在社交平台上自我表达需求较强,也最能够形成舆论力量。文章运用符号学相关理论,从高校网络舆论出发,
<正>由彭立勋主编、乌兰察夫副主编的《城市文化产业与发展模式创新:2006年深圳文化蓝皮书》近日由中国社会科学出版社出版发行。《2006年深圳文化蓝皮书》由总报告、专论、
基于Lyapunov稳定性理论,设计一种含有指数函数的非线性同步控制器,实现了异构磁控忆阻混沌系统之间的完全同步、比例投影同步和函数投影同步.通过误差曲线、同步时序图及同
<正> 按照马克思主义的观点,语言和思维是紧密联系不可分割的。语言是思维的表现,是思维的外壳。一般地说,思维能力发达的人,口头语言也就丰富,它们之间是成正比的。发展说话
介绍了包装饮用水用的PC桶(聚碳酸酯PC饮用水罐、罐、桶)的主要特性、易摔破原因及预防摔破的方法。
对四川省西昌盆地上三叠统白果湾组碎屑岩的主量元素、微量元素、稀土元素进行综合研究,得出其主量元素具有富SiO2、CaO、P2O5,贫Al2O3、TFe2O3、MgO、Na2O、K2O的特征;微量
全科医生的培训是我国现阶段社区卫生服务发展的当务之急.本文对目前国内几种全科医生培养模式进行了分析,探讨适宜我国国情和教育现状的全科医生培养模式,以促进我国全科医