论文部分内容阅读
在分析、评价常用主题搜索ROBOT爬行策略的基础上，将三重过滤技术与改进的Shark启发式搜索算法相结合，设计了自动主题搜索引擎ROBOT的综合爬行策略。由于综合爬行策略在爬行中兼顾了网页的相关性、主题精度和网页质量，因此应用综合爬行策略在Web上下载主题相关网页时，既可利用链接分析扩大某个主题的资源覆盖度，又可保证搜索结果与主题高度相关。