Robot是搜索引擎的关键技术之一，它已经发展为一门涉及人工智能、计算机网络、分布式处理、数据库、数据挖掘、自然语言处理等多领域的理论和技术。随着Web信息的爆炸式增长和人们对信息服务要求的提高，人们期待Robot的搜集性能越来越强。当前提高Robot性能最有效的方法是采用分布式技术，但是这会产生一些新的问题，如URL划分策略、URL匹配方式、负载平衡、扩展性和健壮性等。基于分布式技术的研究，给出了一个基于URL分级散列机制的中文Web信息搜集系统（简称UCHS系统），为了解决上述问题，在该系统中运用了新的设计方案、URL划分策略和匹配算法；针对中文Web信息搜集这一特点，提到了一些有价值的搜索策略和方法。首先介绍了课题的研究背景、意义和研究内容，给出了全文的组织结构。其次对搜索引擎及其关键部分Robot技术进行了全面的分析研究，从搜索引擎的历史、分类、工作原理、评价标准和发展趋势等五个方面对搜索引擎作了全面的阐述。再次从种类、搜索策略、更新策略等问题入手重点分析了Robot技术，并指出当前Robot技术面临的问题。在此基础上，给出了UCHS系统。针对采用分布式技术带来的新问题，提出了基于URL分级散列定位和匹配的方案，并为之设计了两种适用于中文Web信息搜集的URL散列函数。为了进一步提高中文Web信息搜集的性能，提出了基于域名的URL过滤技术、基于首页内容的中文网站识别技术、基于首页的搜索策略和基 于内容变化度的更新策略等技术和策略。基于上述研究成果，给出了UCHS系统的设计模型以及实现中的相关技术，并通过Java语言测试其具体性能。实验结果表明，UCHS系统具有很好的URL匹配性能和负载均衡性能。最后总结全文工作，指出了该文的创新点和下一步的研究工作，并展望了Robot技术的发展方向。